Deskripsi Pekerjaan
TechInnovate Indonesia mencari Big Data Engineer berbakat untuk membangun ekosistem data massal yang revolusioner. Bergabunglah dengan tim kami untuk mengubah kompleksitas data menjadi wawasan strategis yang menggerakkan bisnis ke depan!
Posisi ini menawarkan tantangan teknis tinggi, lingkungan kerja kolaboratif, dan kesempatan untuk berkontribusi pada proyek inovasi nasional. Kami mencari profesional yang mampu merancang, mengimplementasikan, dan mengoptimalkan infrastruktur data skala enterprise.
Tanggung Jawab
- Merancang dan mengembangkan pipeline data menggunakan Apache Hadoop, Spark, dan teknologi big data lainnya
- Membangun dan memelihara data warehouse dengan fokus pada kualitas dan keandalan data
- Optimalkan performa query dan proses ETL untuk analisis data real-time
- Mengintegrasikan sumber data heterogen (SQL, NoSQL, streaming) menjadi platform terpadu
- Implementasikan solusi keamanan data dan kontrol akses sesuai standar industri
- Koordinasi dengan data scientist untuk mendukung analisis prediktif dan machine learning
- Monitoring sistem big data dan troubleshooting masalah performa secara proaktif
Kualifikasi
- S1 Teknik Informatika/Ilmu Komputer atau bidang terkait dengan minimal 3 tahun pengalaman
- Pemahaman mendalam arsitektur Hadoop ecosystem (HDFS, YARN, MapReduce)
- Penguatan dalam Apache Spark dan Spark Streaming untuk pemrosesan data
- Kemampuan SQL tingkat lanjut dan pengalaman dengan database relational & NoSQL
- Keahlian dalam Python/Scala untuk scripting dan pengembangan aplikasi data
- Pengalaman dengan cloud platform (AWS, GCP, Azure) dan layanan data-nya
- Memahami konsep data modeling, data governance, dan ETL best practices
- Kemampuan komunikasi yang baik untuk menangani stakeholder teknis dan non-teknis