Deskripsi Pekerjaan
PT DataFlow Analytics, perusahaan konsultan data terkemuka di Indonesia, sedang mencari Senior ETL Developer yang berbakat untuk bergabung dengan tim Engineering kami di Jakarta. Anda akan memainkan peran kunci dalam merancang, membangun, dan mengoptimalkan pipeline data yang menjadi tulang punggung keputusan bisnis perusahaan.
Jika Anda bersemangat tentang data engineering dan ingin berkembang di lingkungan yang dinamis, ini adalah kesempatan emas untuk Anda.
Tanggung Jawab
- Merancang dan mengembangkan proses ETL yang efisien dan skalabel menggunakan tools seperti Apache Spark, Airflow, dan Talend.
- Membangun arsitektur data warehouse yang tangguh untuk mendukung kebutuhan analitik dan pelaporan.
- Melakukan optimasi kueri dan performa pipeline untuk memastikan pemrosesan data yang cepat dan akurat.
- Bekerja sama dengan tim Data Scientist dan Analyst untuk memenuhi kebutuhan data mereka.
- Memastikan kualitas data dan menangani proses data cleansing dan validasi.
- Mendokumentasikan seluruh proses dan arsitektur ETL secara komprehensif.
- Memantau dan memecahkan masalah pada pipeline data yang berjalan di lingkungan produksi.
Kualifikasi
- Pengalaman minimal 4 tahun sebagai ETL Developer atau Data Engineer.
- Mahir dalam SQL dan bahasa pemrograman seperti Python atau Scala.
- Pengalaman luas dengan platform cloud seperti AWS (Glue, Redshift) atau GCP (BigQuery, Dataflow).
- Memahami konsep data modeling dan arsitektur data warehouse (misalnya, Star Schema, Snowflake).
- Berpengalaman dengan tools orkestrasi seperti Apache Airflow atau Luigi.
- Kemampuan analitis dan pemecahan masalah yang kuat.
- Kemampuan komunikasi yang baik dan mampu bekerja dalam tim lintas fungsi.