LogoFresh Jobs Ahead
Allata
Allata
201 – 500 Karyawan
Sponsor Visa H1BLayanan kesehatanLogistikOtomotif
Allata adalah perusahaan konsultan global yang membantu organisasi menerjemahkan strategi digital menjadi perbaikan bisnis yang nyata. Timnya menangani strategi, pengalaman pelanggan, cloud dan teknologi, data, serta kecerdasan buatan, dan mendukung klien dalam modernisasi, personalisasi, serta peningkatan efisiensi operasional. Allata melayani sektor otomotif, kesehatan, logistik, jasa keuangan, dan teknologi tinggi, dengan memanfaatkan pengalaman para mantan pemimpin TI dan profesional konsultan untuk memandu inisiatif digital yang kompleks.
LinkedIn
Lowongan Perusahaan

Manajer Platform Data Databricks (Jarak Jauh, Texas)

Pimpin arsitektur dan penyampaian platform Lakehouse terkelola serta gudang data perusahaan untuk Allata. Arahkan pipeline data, keamanan, skalabilitas, dan pengembangan produk data.

USAmerika SerikatTXTexasJarak jauhPenuh waktuMenengahSeniorBahasa Wajib: InggrisIlmuwan data
AirflowAWSAzureCloudETLGrafanaJenkinsMS SQL ServerOraclePostgresPrometheusPySparkScalaSparkSQLUnity

Deskripsi

  • Tetapkan arsitektur, pilihan teknologi, pola acuan, dan cetak biru integrasi untuk platform Lakehouse dan gudang data perusahaan.
  • Buat model konseptual, logis, dan fisik untuk produk data multi-tenant dan khusus industri.
  • Standarkan lapisan data untuk penyerapan, penyimpanan mentah, kurasi, dan penyajian.
  • Bangun praktik tata kelola untuk metadata, katalog, silsilah data, kontrak data, dan klasifikasi.
  • Tentukan kontrol keamanan dan kepatuhan untuk akses, penyamaran, enkripsi, segmentasi jaringan, dan audit.
  • Rencanakan skalabilitas platform, ketersediaan tinggi, pemulihan bencana, kapasitas, dan pengelolaan biaya.
  • Pimpin pemilihan dan integrasi Databricks, Delta Lake, Delta Live Tables, Fivetran, Azure Data Factory atau Data Fabric, orkestrasi, dan alat pemantauan.
  • Tetapkan dan tegakkan praktik CI/CD untuk aset data, termasuk pengujian, rilis otomatis, dan rencana pemulihan versi.
  • Tentukan pendekatan untuk penyerapan batch dan streaming, pemadatan, partisi, dan penyimpanan.
  • Tetapkan standar observabilitas untuk metrik, SLA, dasbor, log, jejak, dan peringatan.
  • Berikan kepemimpinan teknis dan bimbingan kepada tim Rekayasa Data.
  • Tinjau arsitektur dan kode untuk komponen penting.
  • Bekerja sama dengan Pemilik Produk Data serta pemangku kepentingan Keamanan, Infrastruktur, BI, dan ML untuk mengubah kebutuhan menjadi solusi dan peta jalan.
  • Bangun, uji, dan terapkan modul pemrosesan menggunakan Spark, PySpark atau Scala, Spark SQL, dan prosedur tersimpan.
  • Kembangkan dan optimalkan pipeline data di Databricks dan platform basis data.
  • Terapkan praktik DevOps, infrastruktur sebagai kode, CI/CD, pengujian otomatis, dan kontrol versi.
  • Atasi masalah kompleks terkait kualitas, kinerja, dan ketersediaan data, serta dorong peningkatan berkelanjutan.

Persyaratan

  • Pengalaman sebelumnya sebagai arsitek atau pemimpin teknis untuk platform data perusahaan.
  • Pengetahuan langsung tentang teknologi Databricks, termasuk Delta Lake, Unity Catalog, Delta Live Tables, Auto Loader, dan Structured Streaming.
  • Kemampuan kuat dalam Spark, PySpark dan/atau Scala, Spark SQL, serta optimalisasi pekerjaan terdistribusi.
  • Latar belakang dalam desain gudang data dan Lakehouse.
  • Pengetahuan praktis tentang pola Medallion, Lambda, dan Kappa.
  • Pengalaman mengintegrasikan SaaS, ETL, atau alat konektor seperti Fivetran.
  • Pengalaman menggunakan alat orkestrasi seperti Airflow, Azure Data Factory, dan Data Fabric.
  • Pengalaman dengan basis data relasional dan hibrida, termasuk MS SQL Server, PostgreSQL, Oracle, Azure SQL, dan AWS RDS/Aurora atau yang setara.
  • Kemahiran dalam CI/CD pipeline data menggunakan Azure DevOps, GitHub Actions, Jenkins, atau alat serupa.
  • Pengalaman mengemas dan menerapkan artefak seperti file .whl dan kontainer.
  • Pengalaman dalam pemrosesan batch dan streaming, pemadatan file, partisi, dan penyetelan penyimpanan.
  • Memahami keamanan cloud, IAM/RBAC, enkripsi, konsep VPC/VNet, dan jaringan cloud.
  • Mengenal alat observabilitas dan pemantauan seperti Prometheus, Grafana, Datadog, atau layanan cloud bawaan.
  • Pengalaman otomatisasi dengan pipeline CI/CD dan pengembangan berbasis trunk menjadi nilai tambah.
  • Kemampuan PySpark tingkat lanjut menjadi nilai tambah.
  • Kemampuan tingkat lanjut dalam optimalisasi alur kerja Spark dan orkestrasi menjadi nilai tambah.
  • Sertifikasi Databricks, arsitektur cloud, atau data menjadi nilai tambah.
  • Mampu mengidentifikasi, mendiagnosis, dan menyelesaikan masalah data yang kompleks.
  • Keterampilan kolaborasi dan komunikasi yang kuat.
  • Rasa ingin tahu dan keterbukaan terhadap alat, teknologi, dan metode baru.

Tunjangan

  • Posisi penuh waktu.
  • Lingkungan kerja inklusif yang memberikan kesempatan setara.
  • Komitmen terhadap keberagaman.

Lowongan Terkait

Lunar Solar Group

Ilmuwan Data Pengukuran Pemasaran (Jarak Jauh, AS)

Lunar Solar Group
51 – 200 Karyawan
KonsultasiPemasaranPerdagangan elektronik
USAmerika Serikat
ANG 110.000 – ANG 130.000 / tahun
Jarak jauhPenuh waktuMenengahSeniorBahasa Wajib: InggrisIlmuwan data
BigQueryPandasPythonScikit-LearnSQLTableau

Bangun pengukuran atribusi, inkrementalitas, dan bauran media untuk Lunar Solar Group, konsultan pertumbuhan dan agensi pemasaran digital. Ubah analisis menjadi rekomendasi anggaran klien yang praktis.

Buka
Airbnb

Ilmuwan Data Senior, Riset Analitik Karyawan

Airbnb
5.001 – 10.000 Karyawan
Sponsor Visa H1BLogistikPerdagangan elektronikPerjalanan
USAmerika Serikat
$180.000 – $210.000 / tahun
Jarak jauhPenuh waktuSeniorBahasa Wajib: InggrisIlmuwan data
PythonSQL

Memimpin riset analitik karyawan di Airbnb dengan inferensi kausal dan pemodelan statistik untuk mendukung keputusan terkait tenaga kerja, kompensasi, perekrutan, dan retensi. Bekerja sama dengan para pemangku kepentingan dalam analisis dan pelaporan yang sensitif.

Buka
The Cigna Group

Pemimpin Senior Pembangun Data, Jarak Jauh (AS)

The Cigna Group
Asuransi kesehatanFarmasiLayanan kesehatan
USAmerika Serikat
$115.200 – $192.000 / tahun
Jarak jauhPenuh waktuSeniorBahasa Wajib: InggrisIlmuwan data
PythonSparkSQLUnity

Bangun produk data Silver dan Gold yang dapat digunakan kembali untuk layanan kesehatan Cigna dengan Databricks serta pipeline MVP dan CI/CD yang terkelola. Ubah kebutuhan bisnis menjadi solusi data siap produksi dan tetapkan standar di seluruh Operasi Data.

Buka