State Street
State Street
State Street ialah syarikat perkhidmatan kewangan global yang melayani pelabur institusi melalui penyelesaian pengurusan pelaburan dan perkhidmatan pelaburan. Tawarannya merangkumi pengurusan aset, perkhidmatan kustodian dan penyelidikan pelaburan, disokong oleh kepakaran dalam bidang kewangan, teknologi kewangan dan perbankan. Syarikat ini membantu pelanggan mengurus aktiviti pelaburan yang kompleks dengan data, pandangan dan keupayaan operasi yang direka untuk meningkatkan kecekapan serta menyokong pembuatan keputusan kewangan.

Insinyur Data, Asisten Wakil Presiden - Princeton, NJ

Bangun platform lakehouse AWS dan Databricks yang mendukung operasional hukum dan kepatuhan State Street. Kembangkan pipeline data terkelola untuk analitik, pelaporan, dan aplikasi AI/ML.

Deskripsi

  • Bangun dan pelihara pipeline data yang dapat diskalakan dengan PySpark, Python, dan Spark SQL
  • Kembangkan dan optimalkan alur kerja ETL/ELT Databricks dengan Delta Lake
  • Terapkan arsitektur lakehouse Bronze, Silver, dan Gold untuk platform data perusahaan
  • Kelola Jobs, Workflows, dan Notebooks Databricks untuk beban kerja batch dan streaming
  • Buat kerangka kerja yang dapat digunakan kembali untuk penyerapan, pemrosesan, dan orkestrasi data
  • Kontainerisasi beban kerja data dengan Docker dan otomatisasi proses melalui scripting
  • Hubungkan pipeline Databricks dengan Power Apps dan Power Automate
  • Sediakan data bagi pengguna bisnis melalui API, konektor, dan dataset terkurasi
  • Rancang dan optimalkan arsitektur lakehouse Databricks
  • Integrasikan SQL Server, Oracle, dan sumber data perusahaan lainnya
  • Terapkan pemodelan dimensional, pemartisian, dan metode optimasi
  • Proses format terstruktur dan semi-terstruktur termasuk JSON dan Parquet
  • Tingkatkan kinerja melalui caching, indexing, dan optimasi Spark
  • Publikasikan dataset terkurasi untuk alur kerja Power BI, Power Apps, dan Power Automate
  • Pertahankan kualitas data dengan pengujian unit, kerangka validasi, dan pemeriksaan otomatis
  • Pantau dan atasi masalah beban kerja serta pipeline Spark terdistribusi
  • Selidiki log dan selesaikan masalah produksi di Databricks serta lingkungan cloud
  • Pelihara lineage data, konsistensi, dan kesiapan audit
  • Bermitra dengan tim Legal, Security, Compliance, dan Enterprise Data
  • Ubah persyaratan bisnis menjadi solusi rekayasa data
  • Bertindak sebagai ahli materi pelajaran dalam Databricks dan arsitektur lakehouse
  • Pimpin inisiatif secara mandiri dan bertanggung jawab atas hasil kerja
  • Dukung tata kelola dengan Databricks Unity Catalog serta kontrol AWS IAM dan KMS
  • Penuhi persyaratan privasi data, regulasi, keamanan, dan audit
  • Pelihara kontrol akses serta standar klasifikasi dan penanganan data
  • Bekerja dengan tim IAM dan keamanan untuk melindungi akses data
  • Rancang dan pelihara pipeline CI/CD dengan Harness, Azure DevOps, atau GitHub
  • Otomatiskan deployment aset Databricks dengan Databricks Repos dan CLI
  • Pantau, jadwalkan, dan optimalkan alur kerja dengan alat orkestrasi Databricks
  • Pelihara dokumentasi arsitektur, aliran data, dan runbook
  • Tingkatkan kinerja, skalabilitas, dan efisiensi biaya platform

Persyaratan

  • Gelar sarjana atau magister dalam ilmu komputer, rekayasa data, sistem informasi, atau bidang teknis terkait
  • Minimal 8 tahun pengalaman dalam rekayasa data atau pengembangan platform data
  • Keahlian langsung dalam Databricks dan Apache Spark
  • Kemahiran dalam PySpark, Python, dan SQL
  • Pengalaman dengan layanan data AWS termasuk S3, Glue, Lambda, dan IAM
  • Pengalaman dengan Delta Lake dan arsitektur lakehouse
  • Pengetahuan kuat tentang pemrosesan data terdistribusi
  • Pengetahuan kuat tentang kerangka ETL dan ELT
  • Pengetahuan kuat tentang teknik pemodelan data
  • Pengalaman langsung dengan komponen Databricks seperti Delta Lake, Workflows, dan Unity Catalog
  • Pengalaman luas membangun pipeline batch dan streaming end-to-end dengan AWS dan Databricks
  • Familiar dengan optimasi kinerja Spark dan Delta Lake
  • Pengalaman mendukung beban kerja analitik, pelaporan, atau AI/ML pada platform lakehouse
  • Pengetahuan tentang tata kelola data, manajemen metadata, dan kontrol keamanan
  • Pengalaman di bidang Legal, Compliance, jasa keuangan, atau industri teregulasi lainnya
  • Pemahaman tentang konsep data hukum termasuk kontrak, klausul, kewajiban, dan perkara
  • Paparan terhadap pemrosesan data tidak terstruktur atau pipeline dokumen dan NLP
  • Pengalaman dengan Power BI, Power Apps, atau Power Platform
  • Pengalaman mengelola data sensitif dalam lingkungan yang berorientasi audit

Tunjangan

  • Rencana tabungan pensiun 401(k) dengan kontribusi pencocokan dari perusahaan
  • Pilihan asuransi termasuk jiwa dasar, medis, gigi, penglihatan, disabilitas jangka panjang, dan perlindungan opsional lainnya
  • Cuti berbayar yang mencakup liburan, cuti sakit, disabilitas jangka pendek, dan tanggung jawab perawatan keluarga
  • Program Bantuan Karyawan
  • Kompensasi insentif dengan kelayakan menerima penghargaan tahunan berbasis kinerja
  • Kelayakan untuk program tabungan tertentu yang diuntungkan pajak
  • Peluang pengembangan profesional yang inklusif
  • Dukungan keseimbangan kerja dan kehidupan yang fleksibel
  • Hari sukarelawan berbayar
  • Jaringan karyawan

Lowongan Terkait

Tenna

Perwakilan Keberhasilan Pelanggan, Tenna (Jarak Jauh, AS)

Tenna

Mendukung pelanggan yang menggunakan platform SaaS dan manajemen aset IoT Tenna dengan menangani masalah, mengelola tiket dukungan, dan membantu pengguna memulai. Memperkuat hubungan pelanggan dan mendukung perpanjangan keanggotaan.

Buka
Liquidity Services

Spesialis Kesuksesan Pelanggan II, GovDeals

Liquidity Services

Mendukung klien lelang pemerintah dengan memproses dan meningkatkan pencatatan aset surplus untuk GovDeals. Peran hibrida ini menggabungkan dukungan klien jarak jauh dengan layanan lapangan di lokasi.

Buka
Yadimen Consultancy Ltd

Konsultan Fungsional CRM Dynamics 365 Berbahasa Jerman

Yadimen Consultancy Ltd
51 – 200 Karyawan
KeuanganKonsultasiSaaS

Menjadi penghubung antara pengguna bisnis berbahasa Jerman dan tim pelaksana dalam proyek Dynamics 365 CRM. Merancang proses dan solusi analisis kesenjangan, lalu mendukung pengujian, persetujuan, dan peralihan ke penggunaan langsung.

Buka