Deskripsi Pekerjaan
Sebagai Data Engineer di Tech Solutions Indonesia, Anda akan berperan kunci dalam membangun dan mengoperasikan infrastruktur data yang kuat dan efisien. Dalam peran ini, Anda akan bekerja sama dengan tim data, analisis, dan bisnis untuk memastikan data yang akurat, terorganisir, dan dapat digunakan secara real-time.
Tanggung Jawab
- Merancang dan mengimplementasikan pipeline data untuk pengumpulan, transformasi, dan analisis data besar
- Membangun dan memperbaiki sistem ETL/ELT untuk mengonversi data asli menjadi format yang dapat digunakan
- Optimalkan performa sistem data menggunakan teknologi big data seperti Hadoop, Spark, dan lainnya
- Desain dan manajemen basis data relasional dan non-relasional untuk menyimpan dan mengakses data
- Implementasi dan pengelolaan sistem penyimpanan data dan infrastruktur cloud (AWS, GCP, atau Azure)
- Mengembangkan dan mengintegrasikan sistem otomatisasi untuk memastikan kualitas data dan konsistensi
- Collaborasi dengan tim data science dan analisis untuk menyediakan data yang siap digunakan
- Melakukan monitoring dan peningkatan performa sistem data secara berkala
Kualifikasi
- Selama 3-5 tahun pengalaman praktis sebagai Data Engineer atau peran teknis terkait
- Pengalaman dalam pengembangan pipeline data, ETL/ELT, dan integrasi data
- Pengalaman di teknologi big data seperti Hadoop, Spark, Kafka, dan lainnya
- Pengalaman dengan cloud platform (AWS, GCP, atau Azure)
- Pemahaman mendalam tentang database relasional (SQL) dan non-relasional
- Keahlian dalam pengelolaan data dan data governance
- Pengalaman dengan teknologi pengolahan data real-time
- Kemampuan berpikir kritis dan problem solving yang kuat
- Keahlian dalam penggunaan alat visualisasi data