The Codest
The Codest
The Codest ialah syarikat pembangunan perisian antarabangsa yang beribu pejabat di United Kingdom dan mempunyai hab teknologi di Poland. Syarikat ini membangunkan produk digital dan memperluas pasukan kejuruteraan pelanggan dengan pembangun berpengalaman dalam pembangunan bahagian belakang dan bahagian hadapan, kejuruteraan awan serta kejuruteraan data. The Codest bekerjasama dengan perusahaan, syarikat yang sedang berkembang pesat dan vendor perisian melalui pembangunan projek serta penambahan tenaga kerja, termasuk untuk pelanggan dalam bidang teknologi kewangan, e-dagang dan teknologi pengiklanan.

Insinyur Data Databricks Senior

Bangun platform Databricks dan pipeline data dari jarak jauh di Polandia. Berkontribusilah pada aplikasi perbankan untuk pelanggan milik grup keuangan besar Jepang.

Deskripsi

  • Bangun dan pelihara platform serta pipeline data Databricks yang skalabel.
  • Berkolaborasilah dengan tim lintas fungsi untuk mendukung data yang andal dan mudah diakses bagi analitik dan intelijen bisnis.
  • Gunakan lapisan lakehouse Bronze, Silver, dan Gold untuk menerapkan Arsitektur Medallion.
  • Buat kerangka kerja kualitas data dengan pengujian otomatis dan pemantauan.
  • Gunakan fitur perjalanan waktu Delta Lake, operasi vacuum, dan Z-ordering.
  • Kembangkan dan pelihara pipeline ETL/ELT kompleks untuk kumpulan data harian berukuran besar.
  • Siapkan alur kerja CI/CD untuk pipeline data dengan Databricks Asset Bundles atau alat sejenis.
  • Bangun solusi pemrosesan batch dan real-time dengan Structured Streaming dan Delta Live Tables.
  • Tingkatkan kinerja job Spark dan efisiensi biaya melalui penskalaan otomatis klaster dan pengelolaan sumber daya.
  • Integrasikan API Databricks dengan sistem eksternal.
  • Rancang arsitektur data yang skalabel dengan Unity Catalog, Delta Lake, dan Apache Spark.
  • Bangun arsitektur data mesh dengan tata kelola dan pelacakan silsilah data.
  • Berkontribusilah pada aplikasi perbankan untuk pelanggan dari grup keuangan terkemuka di Jepang.

Persyaratan

  • Memiliki pengalaman minimal enam tahun di bidang rekayasa data.
  • Memiliki rekam jejak kuat dalam merancang dan menerapkan pipeline data siap produksi serta alur kerja ETL/ELT.
  • Menguasai Python, PySpark, dan SQL.
  • Memiliki pengalaman langsung yang luas dengan AWS Glue, Lambda, Redshift, dan S3.
  • Memahami alat tata kelola dan pengelolaan data, termasuk Unity Catalog dan AWS SageMaker Unified Studio.
  • Berpengalaman dalam migrasi data dan modernisasi sistem lama.
  • Berkomunikasi efektif dalam bahasa Inggris.
  • Sertifikasi Databricks Certified Professional Data Engineer atau kualifikasi setara menjadi nilai tambah.
  • Pengalaman menggunakan alat kontainerisasi dan orkestrasi seperti Docker dan Kubernetes menjadi keunggulan.

Tunjangan

  • Bekerja dalam lingkungan yang kolaboratif dan menarik.
  • Mendapatkan kesempatan untuk berkembang secara profesional.
  • Berkontribusi pada proyek aplikasi perbankan internasional.
  • Bekerja jarak jauh.

Lowongan Terkait

BLUE ORIGIN

Penasihat Hukum Senior, Real Estat dan Konstruksi

BLUE ORIGIN

Memimpin transaksi real estat dan urusan hukum konstruksi untuk Blue Origin, memberi nasihat kepada eksekutif dan mendukung proyek di seluruh portofolio perusahaan di AS dan internasional. Mengembangkan proses hukum yang dapat diperluas seiring perusahaan dirgantara ini memperluas jangkauannya.

Buka