LogoFresh Jobs Ahead
Bitful
Bitful
11 – 50 Karyawan
Layanan kesehatanLogistikPertahanan
Bitful adalah perusahaan konsultasi teknologi yang bekerja sama dengan berbagai organisasi di bidang telekomunikasi, pemerintahan, pertahanan, logistik, dan layanan kesehatan. Layanannya mencakup infrastruktur cloud, konsultasi analitik data, serta perancangan dan pengembangan perangkat lunak khusus. Bitful menjelaskan pendekatannya sebagai berpusat pada manusia, dengan fokus memperluas akses terhadap teknologi dan menciptakan peluang bagi masyarakat yang kurang terlayani. Bitful juga membagikan keuntungan dan menyumbangkan sebagian keuntungan tersebut untuk program pendampingan teknologi.
LinkedIn
Lowongan Perusahaan

Senior Data Engineer, Databricks

Bangun pipeline lakehouse Databricks dan himpunan data untuk pelaporan, pembelajaran mesin, dan analitik. Dukung tim keuangan, penjualan, rantai pasok, dan pemasaran.

USAmerika SerikatFLFloridaOHOhioPAPennsylvaniaJarak jauhKontrakSeniorBahasa Wajib: InggrisInsinyur data
ApacheCloudETLInformaticaOraclePySparkPythonSparkSQLTableau

Deskripsi

  • Buat dan kelola pipeline data serta himpunan data untuk mendukung pelaporan, visualisasi, pembelajaran mesin, dan pengambilan keputusan di berbagai fungsi bisnis.
  • Kembangkan pipeline yang skalabel dan himpunan data yang dapat digunakan kembali dalam lakehouse Databricks.
  • Masukkan, validasi, bersihkan, dan transformasikan data terstruktur maupun tidak terstruktur dengan Python, PySpark, dan SQL.
  • Buat model data dan himpunan data pelaporan untuk Tableau serta alat seperti Spotfire.
  • Hubungkan gudang data dan sistem pelaporan yang sudah ada dengan platform analitik cloud modern.
  • Tingkatkan keandalan pipeline, kualitas data, dan kecepatan pemrosesan.
  • Terapkan praktik pengujian otomatis, pemantauan, dokumentasi, dan CI/CD.
  • Bekerja sama dengan analis, arsitek, pengembang, dan pemangku kepentingan bisnis untuk menghasilkan solusi data yang berguna.
  • Arahkan pekerjaan teknis, tinjau kode, dan bimbing sesama data engineer.

Persyaratan

  • Memiliki pengalaman di bidang rekayasa data setidaknya tujuh tahun, termasuk membangun dan mendukung pipeline data produksi.
  • Menguasai SQL dan memahami pemodelan data, desain basis data, serta pergudangan data dengan baik.
  • Memiliki pengalaman praktis dengan Databricks, Apache Spark, dan platform data cloud.
  • Menguasai Python dan PySpark.
  • Berpengalaman membangun pipeline ETL/ELT dan menghubungkan data dari berbagai sistem sumber.
  • Berpengalaman menyiapkan himpunan data yang andal untuk Tableau atau alat intelijen bisnis serupa.
  • Memahami kontrol versi, pengujian otomatis, dan CI/CD.
  • Mampu mendiagnosis masalah data yang kompleks dan meningkatkan kinerja pipeline.
  • Mampu berkomunikasi dengan jelas dan berpengalaman bekerja dengan tim teknis serta pemangku kepentingan bisnis.
  • Pengalaman dengan Spotfire, Oracle, Informatica, R, atau virtualisasi data diutamakan.
  • Sertifikasi Databricks diutamakan.

Lowongan Terkait