Keep IT Simple
Keep IT Simple
Keep IT Simple (KIS) adalah penyedia layanan dan solusi TI berbasis Silicon Valley yang melayani organisasi di seluruh California dan wilayah lainnya. Didirikan pada tahun 1988, perusahaan ini membantu klien menangani kebutuhan teknologi yang kompleks melalui keamanan siber, virtualisasi, solusi cloud, dan konsultasi infrastruktur jaringan. Layanannya mencakup berbagai industri, termasuk logistik, layanan kesehatan, dan keamanan siber, dengan fokus pada panduan TI yang praktis, solusi yang hemat biaya, serta layanan pelanggan yang responsif.

Senior Data Engineer Databricks, Platform AI

Bangun platform data cloud dan Databricks untuk perusahaan asuransi dan manajemen aset global. Dukung analitik terkelola, pembelajaran mesin, dan solusi AI generatif.

Deskripsi

  • Bangun dan pelihara pipeline serta produk data yang dapat diskalakan dengan Databricks, Spark, Python, dan SQL.
  • Buat dan tingkatkan integrasi batch, streaming, dan waktu nyata antara sumber data perusahaan dan pihak ketiga.
  • Terapkan arsitektur Lakehouse Databricks dengan Delta Lake dan pola Medallion.
  • Hasilkan produk data untuk analitik, pemodelan prediktif, pembelajaran mesin, dan AI generatif.
  • Bekerja sama dengan ilmuwan data dan insinyur AI untuk menyiapkan, mentransformasi, dan mengelola data bagi kebutuhan AI dan ML.
  • Buat pipeline rekayasa fitur dan dukung proses siklus hidup pembelajaran mesin.
  • Bangun solusi data untuk RAG, pencarian vektor dan semantik, serta aplikasi LLM.
  • Tingkatkan pekerjaan Spark, beban kerja SQL, dan kerangka kerja data demi kinerja, skala, dan efisiensi biaya.
  • Bangun kapabilitas kualitas data, observabilitas, lineage, tata kelola, dan pemantauan.
  • Penuhi standar privasi data, keamanan, dan AI yang bertanggung jawab.
  • Dukung CI/CD, Infrastructure as Code, dan DataOps di seluruh platform data.
  • Bimbing insinyur junior dan perkuat praktik rekayasa yang baik.
  • Bermitra dengan ilmuwan data, insinyur AI, arsitek, dan pemangku kepentingan bisnis untuk menghasilkan produk data yang tepercaya dan terkelola.
  • Dukung inisiatif AI perusahaan dan AI generatif dengan platform data yang tangguh, aman, dan terkelola.

Persyaratan

  • Gelar sarjana di bidang ilmu komputer, sistem informasi, teknik, matematika, atau bidang terkait.
  • Pengalaman minimal 7 tahun dalam rekayasa data, pengembangan ETL, atau platform data berskala besar.
  • Pengalaman praktis minimal 3 tahun dengan Databricks dan Apache Spark.
  • Kemampuan kuat dalam Python dan SQL, serta pengalaman dalam pemrosesan data terdistribusi.
  • Latar belakang membangun data lake, gudang data, dan arsitektur Lakehouse berbasis cloud.
  • Pengalaman mendukung inisiatif AI, pembelajaran mesin, atau analitik lanjutan.
  • Pengetahuan tentang pemodelan data, tata kelola, dan manajemen data perusahaan.
  • Pengalaman membangun dan menyetel pipeline berskala besar di AWS, Azure, atau Google Cloud.
  • Pengalaman dengan Databricks Delta Lake, Unity Catalog, Delta Live Tables, MLflow, Mosaic AI, dan Databricks Workflows.
  • Pengalaman praktis dengan AI generatif, model bahasa besar, RAG, basis data vektor, atau aplikasi berbasis AI.
  • Mengenal LangChain, Semantic Kernel, OpenAI API, Hugging Face, atau alat sejenis.
  • Pengalaman dengan feature store, pipeline pelatihan model, dan MLOps.
  • Pengalaman dengan Kafka, Event Hub, atau teknologi streaming lainnya.
  • Sertifikasi Databricks Certified Data Engineer Professional atau sertifikasi cloud setara diutamakan.
  • Keahlian dalam rekayasa platform Databricks.
  • Pengalaman mengembangkan Apache Spark.
  • Keahlian rekayasa data untuk AI dan pembelajaran mesin.
  • Pengalaman membuat solusi data AI generatif.
  • Pengalaman dengan arsitektur Lakehouse.
  • Keahlian pemodelan data dan pergudangan data.
  • Keahlian tata kelola dan keamanan data.
  • Pengalaman dalam observabilitas data dan rekayasa keandalan.
  • Pengalaman dengan platform data cloud AWS atau Azure.
  • Pengalaman DataOps, CI/CD, dan otomatisasi.
  • Pengalaman memimpin secara teknis dan membimbing rekan kerja.

Tunjangan

  • Keterlibatan sebagai kontraktor independen (PJ).
  • Jadwal hibrida dengan kehadiran di kantor Pinheiros, São Paulo selama tiga hari per minggu.

Lowongan Terkait

Kreato Global | BPO and Language Solutions

Interpreter Bahasa Inggris-Spanyol Jarak Jauh OPI/VRI

Kreato Global | BPO and Language Solutions

Menafsirkan percakapan jarak jauh antara penutur bahasa Inggris dan Spanyol dalam layanan medis, keuangan, sosial, dan pelanggan. Menyediakan dukungan bahasa untuk Kreato Global di seluruh Amerika Latin.

Buka