Expleo Group
Expleo Group
Expleo Group ialah rakan kongsi global dalam bidang kejuruteraan, teknologi dan perundingan yang membantu organisasi mentransformasikan operasi, membangunkan produk yang kompleks serta menambah baik proses pembuatan dan kualiti. Skop kerjanya merangkumi perundingan, pertahanan dan logistik, dengan keupayaan dalam kecerdasan buatan, pendigitalan dan keselamatan siber. Ditubuhkan pada tahun 1966, Expleo menggabungkan pengalaman lebih lima dekad dengan pasukan seramai 18,000 pakar di 29 negara untuk menyokong inovasi dan prestasi operasi.

Jurutera Data, PySpark dan Databricks

Bina saluran paip PySpark dan SQL di Databricks, serta hasilkan set data yang boleh dipercayai dan ditadbir dengan baik untuk pasukan analitik dan pembelajaran mesin di Chennai.

Penerangan

  • Bangunkan saluran paip ETL dan ELT menggunakan PySpark dan SQL untuk pemprosesan data berskala besar
  • Bina dan optimumkan aliran kerja Databricks, termasuk buku nota, tugas dan konfigurasi kluster
  • Bekerjasama dengan pasukan analitik dan pembelajaran mesin untuk menyediakan set data yang bersih dan didokumenkan
  • Pantau prestasi saluran paip, selesaikan kegagalan serta kekalkan kualiti dan integriti data
  • Wujudkan tadbir urus data dan amalan terbaik platform
  • Berikan sumbangan kepada semakan reka bentuk dan keputusan seni bina

Keperluan

  • Mempunyai pengalaman praktikal selama 4–6 tahun dalam kejuruteraan data atau bidang berkaitan
  • Mahir menggunakan PySpark untuk pemprosesan teragih berskala besar
  • Menguasai SQL lanjutan, termasuk pengoptimuman pertanyaan, fungsi window, CTE dan cantuman kompleks
  • Mempunyai pengalaman kukuh dengan Databricks, Delta Lake dan aliran kerja; Unity Catalog diutamakan
  • Berpengalaman menggunakan platform awan AWS atau Azure
  • Menguasai PySpark, SQL, Databricks, AWS, Azure, Python dan Git
  • Pengalaman dengan alat penstriman seperti Apache Kafka atau Spark Streaming merupakan kelebihan
  • Pendedahan kepada saluran paip pembelajaran mesin dan aliran kerja kejuruteraan ciri merupakan kelebihan

Pekerjaan Berkaitan