Skill diminta
AirflowApacheCI/CDCommunicationProblem SolvingPythondbt
Deskripsi
Tugas dan tanggung jawab
- Membangun dan mengelola pipeline data (ETL/ELT) yang andal dan skalabel untuk mendukung kebutuhan analitik dan AI
- Menyediakan dan mengelola infrastruktur terpusat untuk kebutuhan data, seperti data lake atau data warehouse.
- Mengimplementasikan otomatisasi untuk alur kerja data dan AI, dari persiapan data hingga penyajian model.
- Mengidentifikasi dan mengotomatiskan tugas-tugas manual yang berulang
- Merancang, mengimplementasikan, dan memelihara pipeline continuous integration/ continuous Deployment (CI/CD) untuk semua aplikasi
- Mengintegrasikan pengujian otomatis (unit, integrasi, keamanan) ke dalam pipeline
- Menyediakan dan mengelola platform untuk Data, AI, dan Otomasi yang akan digunakan oleh unit bisnis lain
Kualifikasi
- Kemampuan scripting yang kuat (Python)
- Pengalaman dengan alat orkestrasi data (Apache Airflow, dbt)
- Problem solving skill (analyst & sistematis)
- Komunikasi dan kolaborasi teknis dan non-teknis dalam team