Senior Data Engineer
Thỏa thuận • Hà Nội · Tòa nhà Detech, Nam Từ Liêm
Mô Tả Công Việc
Giới thiệu dự án Tham gia xây dựng trục hạ tầng dữ liệu lớn cho Nền tảng Giáo dục Thông minh thế hệ mới (AI-Powered K-12 Learning Platform). Hệ thống được thiết kế theo kiến trúc Enterprise Hybrid Data Lakehouse hiện đại, xử lý dòng dữ liệu streaming thời gian thực (xAPI statements) từ hành trình học tập và đồng bộ dữ liệu hồ sơ quy mô lớn từ các hệ thống cơ sở. Trách nhiệm chính • Xây dựng Data Pipeline: thiết kế, triển khai và tối ưu đường ống dữ liệu lớn — Batch (Airbyte) và Streaming thời gian thực (Apache Kafka). • Phát triển Lakehouse: cấu trúc lưu trữ và phân tách dữ liệu trên Apache Iceberg, Spark và Trino, đảm bảo ACID và hiệu năng truy vấn quy mô lớn. • Quản trị Đồ thị & Vector: phối hợp Technical Lead chuẩn hóa dữ liệu, đẩy vào Neo4j và Qdrant. • Triển khai MDM & Golden Record: Master Data Management, làm sạch, xử lý trùng lặp, tạo bản ghi duy nhất cho định danh người dùng xuyên suốt hệ thống. • Data Governance: Data Quality tự động và Data Lineage phục vụ kiểm toán, báo cáo theo chuẩn.
Yêu Cầu Tuyển Dụng
Yêu cầu chuyên môn • Kinh nghiệm: tối thiểu 3 năm Data Engineer hoặc xử lý Big Data tương đương. • Stack: thành thạo Apache Kafka, PySpark/Spark SQL, Trino và Apache Iceberg. • Cơ sở dữ liệu: tối ưu PostgreSQL, NoSQL (MongoDB); tư duy truy vấn đồ thị (Neo4j/Cypher) là lợi thế. • Tư duy kỹ thuật: DataOps (CI/CD cho pipeline, quản lý phiên bản dữ liệu bằng mã nguồn). Phúc lợi Review/tăng lương hàng năm, thưởng cuối năm ≥ 1 tháng lương, BH viện quốc tế, khám định kỳ, du lịch trong/ngoài nước, T2–T6 không OT.