Visa, elektronik ödeme ağı aracılığıyla tüketicilere, işletmelere, finans kuruluşlarına ve devletlere hizmet sunan küresel bir ödeme teknolojileri şirketidir. Platformu; kredi, banka kartı ve ön ödemeli işlemlerin yanı sıra tüketiciler ve işletmeler için ödeme işleme, dolandırıcılığın önlenmesi, güvenlik, analiz ve diğer hizmetleri destekler. Visa ayrıca yapay zekâ destekli ticaret girişimleri de dâhil olmak üzere yeni ödeme çözümleri geliştirir ve Visa Vakfı aracılığıyla finansal kapsayıcılığı destekler.
Kıdemli Veri Mühendisi, Veri Gölü (Brezilya Uzaktan)
Visa'nın kurumsal veri gölü için Spark, Databricks ve Airflow işlem hatları oluşturun ve yönetin. Veri kalitesini ve orkestrasyonu iyileştirerek verilere güvenilir self servis erişim sağlayın.
Açıklama
- PySpark ve SparkSQL kullanarak Databricks veri alımı, dönüştürme ve veri kalitesi işlem hatlarını geliştirin, test edin ve yönetin.
- Veri iş akışlarını düzenlemek için MWAA Airflow DAG'leri oluşturun ve güncelleyin.
- Dönüştürme ve doğrulama görevleri için SQL yazın ve optimize edin.
- Great Expectations veya eşdeğer bir araçla veri kalitesi kontrolleri uygulayın ve izleyin.
- Ekip arkadaşlarının kod incelemelerine katkıda bulunun.
- Kıdemli mühendislerin desteğiyle işlem hattı hatalarını ve veri kalitesi sorunlarını giderin.
- Veri kümeleri ve işlem hatları için belgeler oluşturun ve güncelleyin.
- Sprint planlamasına, tahmin çalışmalarına ve retrospektiflere katılın.
- Ekibin CI/CD, test ve yönetişim standartlarını uygulayın.
- Visa'nın kurumsal veri gölünün güvenilirliğini ve kalitesini güçlendirmeye yardımcı olun.
Gereksinimler
- Brezilya'da ikamet edin.
- B2 veya üzeri düzeyde (Üst-Orta) İngilizce iletişim kurun.
- Lisans veya ön lisans derecesiyle en az 3 yıl ilgili deneyime ya da en az 5 yıl ilgili deneyime sahip olun.
- Otomasyon ve veri işleme için Python kullanın.
- Toplu veri işlem hatlarını ve ETL/ELT kalıplarını anlayın.
- PySpark veya SparkSQL dahil olmak üzere Apache Spark'ın temellerini bilin.
- Databricks işleri, iş akışları, küme yönetimi ve performans ayarlama konularında çalışın.
- Birleştirmeler, pencere işlevleri ve CTE'ler dahil olmak üzere orta ve ileri düzey SQL kullanın.
- Bölümlendirme, yerleşim ve yaşam döngüsü yönetimi dahil Amazon S3 veri gölü tasarımını anlayın.
- S3, IAM ve CloudWatch dahil temel AWS kavramlarını bilin.
- Boyutsal veya Kimball modellemeyi ve madalyon katmanı mimarilerini anlayın.
- Git/GitHub iş akışlarını kullanın ve kod incelemelerine katılın.
- Tercihen Delta Lake, Apache Airflow/MWAA, CDC kalıpları, veri kalitesi kavramları, Terraform temelleri veya Superset ve pano oluşturma gibi BI entegrasyonu deneyimine sahip olun.
Yan Haklar
- Uzaktan çalışma düzeni.
- Büyük ölçekte etki yaratma fırsatı.
- Anlamlı çalışmalarla mesleki gelişim ve beceri kazanımı.
- Uzaktan çalışanlar, önceden planlanmış ve önceden bildirilen şekilde Visa ofisinde çalışma fırsatlarına sahip olabilir.