Visa
Visa
Visa adalah perusahaan teknologi pembayaran global yang melayani konsumen, pedagang, lembaga keuangan, dan pemerintah melalui jaringan pembayaran elektroniknya. Platformnya mendukung transaksi kredit, debit, dan prabayar, serta pemrosesan pembayaran, pencegahan penipuan, keamanan, analitik, dan layanan lainnya untuk konsumen dan bisnis. Visa juga mengembangkan solusi pembayaran yang sedang berkembang, termasuk inisiatif perdagangan berbasis AI, serta mendukung inklusi keuangan melalui Visa Foundation.

Insinyur Data Senior, Data Lake (Kerja Jarak Jauh di Brasil)

Bangun dan pelihara pipeline Spark, Databricks, dan Airflow untuk data lake korporat Visa. Tingkatkan kualitas data, orkestrasi, dan akses mandiri yang andal ke data.

Deskripsi

  • Kembangkan, uji, dan pelihara pipeline ingesti, transformasi, dan kualitas data Databricks dengan PySpark dan SparkSQL.
  • Buat dan perbarui DAG Airflow MWAA untuk mengorkestrasi alur kerja data.
  • Tulis dan optimalkan SQL untuk tugas transformasi dan validasi.
  • Terapkan dan pantau pemeriksaan kualitas data dengan Great Expectations atau alat yang setara.
  • Berkontribusi dalam peninjauan kode oleh rekan kerja.
  • Atasi kegagalan pipeline dan masalah kualitas data dengan dukungan dari insinyur senior.
  • Buat dan perbarui dokumentasi untuk dataset dan pipeline.
  • Berpartisipasi dalam perencanaan sprint, estimasi, dan retrospektif.
  • Terapkan standar CI/CD, pengujian, dan tata kelola tim.
  • Bantu memperkuat keandalan dan kualitas data lake korporat Visa.

Persyaratan

  • Berdomisili di Brasil.
  • Berkomunikasi dalam bahasa Inggris tingkat B2 atau lebih tinggi (Menengah Atas).
  • Memiliki setidaknya 3 tahun pengalaman relevan dengan gelar Sarjana atau Associate, atau setidaknya 5 tahun pengalaman relevan.
  • Menggunakan Python untuk otomatisasi dan pemrosesan data.
  • Memahami pipeline data batch serta pola ETL/ELT.
  • Mengetahui dasar-dasar Apache Spark, termasuk PySpark atau SparkSQL.
  • Berpengalaman dengan pekerjaan, alur kerja, manajemen klaster, dan penyetelan kinerja Databricks.
  • Menggunakan SQL tingkat menengah hingga lanjut, termasuk join, fungsi window, dan CTE.
  • Memahami desain data lake Amazon S3, termasuk partisi, tata letak, dan pengelolaan siklus hidup.
  • Mengetahui konsep inti AWS, termasuk S3, IAM, dan CloudWatch.
  • Memahami pemodelan dimensional atau Kimball serta arsitektur lapisan medallion.
  • Menggunakan alur kerja Git/GitHub dan berpartisipasi dalam peninjauan kode.
  • Diutamakan: pengalaman dengan Delta Lake, Apache Airflow/MWAA, pola CDC, konsep kualitas data, dasar-dasar Terraform, atau integrasi BI seperti Superset dan pembuatan dasbor.

Tunjangan

  • Pengaturan kerja jarak jauh.
  • Kesempatan untuk memberikan dampak dalam skala besar.
  • Pengembangan profesional dan peningkatan keterampilan melalui pekerjaan yang bermakna.
  • Karyawan jarak jauh mungkin memiliki kesempatan terjadwal dengan pemberitahuan sebelumnya untuk bekerja dari kantor Visa.

Lowongan Terkait

Hewlett Packard Enterprise

Arsitek Teknis Presales Kanal Senior, Penyimpanan — HPE Kanada Kerja Jarak Jauh

Hewlett Packard Enterprise

Bantu mitra kanal HPE memosisikan, merancang, dan menjual solusi penyimpanan serta perlindungan data. Dukung arsitektur solusi, demonstrasi, uji konsep, pengembangan pipeline, dan advokasi teknis mitra.

Buka
Hewlett Packard Enterprise

Arsitek Teknis Presales Kanal, Kanada

Hewlett Packard Enterprise

Membimbing mitra kanal HPE dalam memosisikan, merancang, dan menghadirkan solusi penyimpanan serta perlindungan data. Membangun kemampuan teknis mitra, mengembangkan pipeline, dan membantu meraih kemenangan dalam persaingan.

Buka
Hewlett Packard Enterprise

Insinyur Senior Operasi Jaringan Cloud (Izin Keamanan Rahasia)

Hewlett Packard Enterprise

Mengoperasikan jaringan cloud privat dan pusat data HPE yang aman untuk mendukung pelanggan federal. Menangani infrastruktur rahasia dan VMware NSX di Oklahoma, Pennsylvania, dan Utah.

Buka
General Dynamics Information Technology

Senior Engineer Data Cloud Azure

General Dynamics Information Technology

Modernisasi rekam medis Indian Health Service dengan membangun pipeline data Azure dan model data kesehatan yang skalabel. Kembangkan alur kerja ETL dan transformasi PySpark untuk data kesehatan perusahaan.

Buka
Hewlett Packard Enterprise

Insinyur Senior Operasi Jaringan Cloud (Izin Keamanan Rahasia)

Hewlett Packard Enterprise

Mengoperasikan dan mengamankan jaringan cloud privat Hewlett Packard Enterprise untuk mendukung pelanggan federal. Menangani infrastruktur rahasia, VMware NSX, perubahan ServiceNow, dan konektivitas yang sangat penting bagi misi.

Buka
Taste Labs

Associate Talenta di Taste Labs, San Francisco (Hibrida)

Taste Labs

Mencari dan mengoordinasikan perekrutan engineer, peneliti, desainer, dan tenaga operasional di Taste Labs, perusahaan rintisan infrastruktur AI. Bekerja sama dengan Lead Operasi Talenta & SDM untuk menyempurnakan proses rekrutmen dan pengalaman kandidat.

Buka