Deskripsi Pekerjaan
PT Solusi Digital Indonesia, perusahaan teknologi terkemuka di Indonesia, sedang mencari Apache Airflow Engineer berpengalaman dengan semangat untuk membangun sistem otomatisasi data yang canggih dan andal. Bergabunglah dengan tim kami yang inovatif untuk merancang, mengoptimalkan, dan memelihara pipeline data berskala enterprise menggunakan Apache Airflow serta teknologi data modern lainnya.
Rekan kerja yang cocok bagi Anda yang memiliki keahlian dalam orkestrasi workflow, pengelolaan scheduler, dan integrasi sistem Big Data. Kami menawarkan lingkungan kerja yang kolaboratif, proyek menarik, serta kesempatan untuk berkembang bersama tim lintas industri. Wujudkan karier impian Anda di bidang Big Data & Data Engineering di kota industri yang sedang berkembang pesat, Bekasi!
Tanggung Jawab
- Merancang, mengembangkan, dan memelihara pipeline data otomatis menggunakan Apache Airflow dengan standar industri untuk scalability dan reliability.
- Mengkonfigurasi, mengoptimasi, dan memonitor workflows (DAGs) untuk memastikan eksekusi data yang lancar dan efisien.
- Berkolaborasi dengan tim Data Science, Engineering, dan DevOps untuk mengintegrasikan sistem orchestration ke dalam ekosistem data perusahaan.
- Mengelola konfigurasi lingkungan Airflow (Prod/Staging/Dev) serta mengidentifikasi dan menyelesaikan gangguan operasional atau kinerja.
- Menerapkan praktik keamanan informasi dan akses data sesuai dengan kebijakan perusahaan dan regulasi yang berlaku.
- Berpartisipasi dalam proses code review, dokumentasi teknis, serta melakukan auditor dan pemeliharaan rutin terhadap sistem.
- Melakukan benchmarking dan evaluasi alat maupun sistem alternatif (misal: Prefect, Dagster) untuk meningkatkan performa orkestrasi data.
- Memberikan dukungan teknis kepada tim secara proaktif dan menyeluruh guna mempercepat adopsi teknologi otomasi data.
Kualifikasi
- Pendidikan minimal S1 di bidang Ilmu Komputer, Teknik Informatika, atau bidang terkait lainnya.
- Pengalaman kerja minimal 3 tahun dalam bidang orkestrasi data menggunakan Apache Airflow.
- Pemahaman mendalam tentang konsep orchestration, scheduling, triggers, retries, serta error handling di dalam DAGs.
- Keahlian dalam bahasa pemrograman Python serta framework dan pustaka terkait (pandas, SQL, etc.).
- Pengalaman bekerja dengan sistem big data (Hadoop, Spark, HDFS, Snowflake, BigQuery) dan komponen infrastruktur cloud (AWS/GCP/Azure).
- Pengalaman dengan CI/CD pipelines (GitLab CI, GitHub Actions, Jenkins) serta praktik Infrastruktur sebagai Kode (Terraform, Ansible).
- Memiliki sertifikasi atau pelatihan terkait Apache Airflow atau orkestrasi data dari platform terakreditasi adalah nilai tambah.
- Kemampuan komunikasi dan kerja tim yang kuat, serta kemampuan analisis dan problem-solving yang tajam.