Sigma Software Group adalah perusahaan konsultan teknologi multinasional yang didirikan pada tahun 2002. Timnya menyediakan layanan pengembangan perangkat lunak, desain grafis, pengujian, dan dukungan teknis bagi klien di berbagai sektor, termasuk otomotif, layanan kesehatan, telekomunikasi, penerbangan, perbankan, gim, real estat, dan periklanan. Perusahaan ini merekrut spesialis TI untuk mengerjakan proyek rekayasa yang kompleks serta mendukung pengembangan profesional melalui pendampingan dan pembelajaran berkelanjutan. Kesempatan kerja jarak jauh merupakan bagian dari model kerjanya, dengan proyek yang melayani organisasi seperti AstraZeneca, Scania, dan SAS.
Data Engineer Madya (Azure, Spark) — Kerja Jarak Jauh di Polandia
Bangun platform data Azure dan pipeline yang skalabel untuk mendukung analitik dan operasional. Kembangkan alur kerja Spark, model data, dan solusi cloud yang andal.
Deskripsi
- Bangun platform data dan pipeline yang skalabel dan andal untuk analitik dan operasional
- Kembangkan alur kerja pemrosesan data terdistribusi dengan Apache Spark, PySpark, dan Databricks
- Perluas platform data cloud menggunakan Azure Data Factory, Synapse, Event Hub, dan Azure Data Lake Storage
- Buat model data untuk analitik, pelaporan, dan penggunaan lanjutan
- Integrasikan dan proses data dari berbagai sumber sambil menjaga kualitas dan konsistensinya
- Pantau dan tingkatkan kinerja, keandalan, serta skalabilitas pipeline
- Bekerja sama dengan analis, ilmuwan data, dan engineer untuk mengubah kebutuhan menjadi solusi
- Perkuat praktik rekayasa data, pengujian, dan keandalan operasional
- Evaluasi dan terapkan alat serta teknologi untuk ekosistem rekayasa data
Persyaratan
- Pengalaman praktis minimal empat tahun di bidang rekayasa data atau pengembangan platform pemrosesan data
- Kemampuan SQL yang kuat
- Pengalaman Python yang solid untuk mengembangkan pipeline
- Pengalaman dengan kerangka kerja pemrosesan terdistribusi seperti Apache Spark atau PySpark; Databricks lebih diutamakan
- Pengalaman praktis merancang dan menerapkan pipeline di lingkungan cloud; Azure lebih diutamakan
- Pengalaman dengan sistem analitik berskala produksi dan pemodelan data
- Pengetahuan tentang desain ETL/ELT, pemodelan dimensional, dan prinsip pergudangan data
- Pengalaman dengan arsitektur data lake modern dan format seperti Parquet dan JSON
- Mengenal alat orkestrasi alur kerja seperti Airflow
- Pengalaman mengembangkan dan mengoptimalkan basis data
- Mampu merancang solusi yang skalabel dengan pengawasan minimal
- Keterampilan kolaborasi dan komunikasi yang kuat
- Kemampuan bahasa Inggris tingkat profesional
Tunjangan
- Kesempatan untuk berkembang secara profesional
- Lingkungan kerja yang suportif
- Tunjangan yang kompetitif
- Pilihan kerja jarak jauh