Skill diminta
AWSAirflowApacheGitPandasPythonSQLdbt
Gaji pasar untuk posisi ini
Median Rp8,7 jt/bulan · rentang umum Rp7,5 jt – Rp9,5 jt
Berdasarkan 105 lowongan Data Engineering se-Indonesia (semua level).
Lihat data gaji selengkapnya →Deskripsi
- Job description for Data Engineer at Eup Group
- I. Mô tả công việc
Vận hành và tối ưu hệ thống dữ liệu trên S3, Apache Iceberg, Athena/Glue, đảm bảo hiệu năng và chi phí; hoàn tất chuyển đổi các bảng còn lại sang Iceberg.
Xây dựng và chuẩn hóa các định nghĩa chỉ số kinh doanh (doanh thu, CAC, retention, DAU/MAU...) trên dbt Core, có kiểm thử và tài liệu đầy đủ, làm nguồn dữ liệu chuẩn cho BI, API và AI.
- Triển khai và vận hành Apache Superset, phục vụ báo cáo nội bộ toàn công ty và dashboard nhúng cho đối tác từ năm 2027.
- Đánh giá và triển khai công cụ điều phối pipeline (Dagster/Airflow) để thay thế cơ chế cron hiện tại.
- Hướng dẫn, hỗ trợ và chia sẻ kiến thức với đội ngũ để nâng cao năng lực vận hành hệ thống dữ liệu chung.
- Thiết kế hệ thống lưu trữ dữ liệu học tập (Learning Record Store) và phối hợp với đội AI xây dựng các giải pháp phân tích dữ liệu bằng AI.
- Tham gia họp dự án, báo cáo tiến độ và đề xuất giải pháp kỹ thuật khi cần thiết.
- II. Yêu cầu ứng viên
- Tốt nghiệp Đại học ngành CNTT, ưu tiên các ngành Công nghệ thông tin, Khoa học máy tính, Trí tuệ nhân tạo hoặc liên quan.
- Có từ 4 năm kinh nghiệm làm Data Engineering với hệ thống dữ liệu quy mô lớn.
- Thành thạo các công cụ và dịch vụ trong hệ sinh thái AWS (S3, Athena/Presto/Trino, Glue Catalog, IAM...).
- Có kiến thức vững về định dạng dữ liệu dạng cột (Parquet) và các table format hiện đại như Iceberg, Delta, Hudi.
- Thành thạo SQL và Python (pandas, pyarrow, boto3...).
- Có kinh nghiệm thực tế với dbt, hoặc khả năng học hỏi nhanh để áp dụng.
- Đã từng vận hành ít nhất một công cụ điều phối pipeline như Airflow, Dagster, Prefect hoặc tương đương.
- Sử dụng thành thạo Git, có tư duy làm việc chuyên nghiệp: mọi thứ có thể review, kiểm thử và khôi phục khi cần.
- III. Quyền lợi
1. Chế độ lương, thưởng, thu nhập
- Thu nhập: Lương cứng + phụ cấp + thưởng dự án
- Thưởng cuối năm (Lương tháng 13).