LogoFresh Jobs Ahead
Sigma Software Group
Sigma Software Group
1,001 – 5,000 Pekerja
AutomotifPenjagaan kesihatanPerundingan
Sigma Software Group ialah syarikat perunding teknologi multinasional yang diasaskan pada tahun 2002. Pasukannya menyediakan pembangunan perisian, reka bentuk grafik, pengujian dan sokongan teknikal untuk pelanggan dalam sektor seperti automotif, penjagaan kesihatan, telekomunikasi, penerbangan, perbankan, permainan, hartanah dan pengiklanan. Syarikat ini mengambil pakar IT untuk mengusahakan projek kejuruteraan yang kompleks serta menyokong pembangunan profesional melalui bimbingan dan pembelajaran berterusan. Peluang kerja jarak jauh merupakan sebahagian daripada model kerjanya, dengan projek untuk organisasi seperti AstraZeneca, Scania dan SAS.
LinkedIn
Pekerjaan Syarikat

Jurutera Data Kanan, Migrasi Databricks

Migrasikan analitik runcit perusahaan daripada BigQuery ke Databricks Lakehouse dengan membina saluran paip PySpark yang boleh diskalakan, seni bina medallion dan platform data awan yang dikawal selia.

RORomaniaJarak jauhSepenuh masaSeniorBahasa Diperlukan: InggerisJurutera data
AirflowApacheAwanBigQueryETLPySparkPythonSparkSQLUnity

Penerangan

  • Bantu memigrasikan platform analitik berskala besar daripada BigQuery ke Databricks.
  • Reka bentuk dan bina seni bina Lakehouse yang boleh diskalakan menggunakan Databricks dan Delta Lake.
  • Nilai beban kerja ETL dan ELT sedia ada serta tentukan pendekatan migrasi.
  • Bina dan optimumkan saluran paip untuk jumlah data runcit dan analitik yang besar.
  • Laksanakan strategi pemprosesan inkremental dan rangka kerja transformasi yang boleh diskalakan.
  • Bangunkan dan selenggara penyelesaian pemprosesan data Spark menggunakan PySpark.
  • Reka bentuk dan selenggara lapisan medallion Bronze, Silver dan Gold.
  • Amalkan tadbir urus dan keselamatan data menggunakan Unity Catalog.
  • Bekerjasama dengan pasukan Data Science, Analytics, Product dan Customer Engineering.
  • Sumbang kepada perbincangan seni bina dan reka bentuk penyelesaian teknikal.
  • Cipta komponen platform data dan piawaian kejuruteraan yang boleh digunakan semula.
  • Semak kod serta tingkatkan kebolehpercayaan dan kebolehselenggaraan platform.
  • Selesaikan masalah dan optimumkan beban kerja SQL dan Spark yang kompleks.
  • Sokong pelaksanaan produksi dan pemodenan platform.

Keperluan

  • Mempunyai sekurang-kurangnya lima tahun pengalaman profesional sebagai Data Engineer.
  • Mahir dalam pengaturcaraan Python dan SQL peringkat lanjutan.
  • Mempunyai pengalaman komersial secara langsung dengan Databricks.
  • Menguasai Apache Spark, khususnya PySpark.
  • Berpengalaman mereka bentuk dan membina platform data awan moden.
  • Berpengalaman membangunkan saluran paip ETL dan ELT serta penyelesaian pemprosesan data berskala besar.
  • Mempunyai pengalaman langsung dengan Delta Lake.
  • Berpengalaman menggunakan Spark Declarative Pipelines.
  • Berpengalaman memantau kluster, menganalisis metrik dan mengoptimumkan prestasi.
  • Memahami seni bina pemprosesan data teragih.
  • Memahami konsep pergudangan data dan pemodelan dimensi.
  • Berpengalaman menggunakan Airflow atau alat orkestrasi yang setara.
  • Berpengalaman mengoptimumkan beban kerja SQL analitik yang kompleks.
  • Berpengalaman mengamalkan CI/CD pada platform kejuruteraan data.
  • Mahir menyelesaikan masalah dan mengoptimumkan prestasi.
  • Mampu bekerja dengan berkesan bersama pasukan rentas fungsi dan antarabangsa.
  • Mempunyai penguasaan bahasa Inggeris tahap Upper-Intermediate atau lebih tinggi.

Faedah

  • Pekerja boleh bekerja dari jarak jauh.
  • Peluang pembelajaran berterusan.
  • Peluang berkembang bersama teknologi.
  • Kerja kejuruteraan yang memberikan impak bermakna.
  • Peluang mengusahakan projek antarabangsa yang kompleks.

Pekerjaan Berkaitan

AllCloud

Jurutera Data Berbahasa Ibrani

AllCloud
201 – 500 Pekerja
Penaja Visa H1BLogistikPenjagaan kesihatanPerundingan
RORomaniaJarak jauhSepenuh masaPertengahanSeniorBahasa Diperlukan: InggerisBahasa Diperlukan: IbraniJurutera data
AirflowAmazon RedshiftAwanAWSETLKafkaKubernetesPerkhidmatan mikroPythonSparkSQL

Bina platform lakehouse AWS, saluran paip data dan penyelesaian AI untuk pelanggan perundingan awan AllCloud. Reka bentuk seni bina yang boleh diskala dan bantu pelanggan memodenkan sistem data mereka.

Buka