Dataingeniør
inforcer
Byg skalerbare dataplatforme, integrationer og ETL-pipelines til inforcers cybersikkerheds- og AI-produkter. Muliggør analyser, automatisering, rapportering og AI-initiativer.
Åbn
Visa er en global virksomhed inden for betalingsteknologi, der betjener forbrugere, handlende, finansielle institutioner og myndigheder gennem sit elektroniske betalingsnetværk. Platformen understøtter kredit-, debet- og forudbetalte transaktioner samt betalingsbehandling, forebyggelse af svindel, sikkerhed, analyse og andre tjenester for forbrugere og virksomheder. Visa udvikler også nye betalingsløsninger, herunder AI-baserede initiativer inden for handel, og understøtter finansiel inklusion gennem Visa Foundation.
Senior dataingeniør, datalake (fjernarbejde i Brasilien)
Byg og vedligehold Spark-, Databricks- og Airflow-pipelines til Visas virksomheds-datalake. Forbedr datakvalitet, orkestrering og pålidelig selvbetjeningsadgang til data.
Beskrivelse
- Udvikl, test og vedligehold Databricks-pipelines til indlæsning, transformation og datakvalitet med PySpark og SparkSQL.
- Opret og opdater MWAA Airflow-DAG'er for at orkestrere dataarbejdsgange.
- Skriv og optimer SQL til transformations- og valideringsopgaver.
- Implementer og overvåg datakvalitetskontroller med Great Expectations eller et tilsvarende værktøj.
- Bidrag til code reviews.
- Fejlsøg pipelinefejl og datakvalitetsproblemer med støtte fra senioringeniører.
- Opret og opdater dokumentation for datasæt og pipelines.
- Deltag i sprintplanlægning, estimering og retrospektiver.
- Anvend teamets standarder for CI/CD, test og governance.
- Bidrag til at styrke pålideligheden og kvaliteten af Visas virksomheds-datalake.
Krav
- Være baseret i Brasilien.
- Kommunikere på engelsk på B2-niveau eller højere (øvre mellemniveau).
- Have mindst 3 års relevant erfaring med en bachelor- eller erhvervsakademigrad eller mindst 5 års relevant erfaring.
- Bruge Python til automatisering og databehandling.
- Forstå batchbaserede datapipelines og ETL/ELT-mønstre.
- Kende det grundlæggende i Apache Spark, herunder PySpark eller SparkSQL.
- Arbejde med Databricks-jobs, workflows, klyngeadministration og performanceoptimering.
- Bruge SQL på mellem- til avanceret niveau, herunder joins, window-funktioner og CTE'er.
- Forstå design af datasøer i Amazon S3, herunder partitionering, layout og livscyklusstyring.
- Kende centrale AWS-koncepter, herunder S3, IAM og CloudWatch.
- Forstå dimensionel modellering eller Kimball-modellering samt arkitekturer med medallion-lag.
- Bruge Git/GitHub-workflows og deltage i code reviews.
- Foretrukket: erfaring med Delta Lake, Apache Airflow/MWAA, CDC-mønstre, datakvalitetskoncepter, grundlæggende Terraform eller BI-integration som Superset og dashboarding.
Fordele
- Fjernarbejdsordning.
- Mulighed for at gøre en forskel i stor skala.
- Faglig udvikling og kompetenceudvikling gennem meningsfuldt arbejde.
- Fjernansatte kan få planlagte muligheder med forudgående varsel for at arbejde fra et Visa-kontor.
Relaterede job
Senior dataingeniør inden for sikkerhed
State Street
AWSAzureCloudCybersikkerhedDistribuerede systemerETLGoogle Cloud PlatformMS SQL ServerPythonSDLCServiceNowSQL
Led data engineering på tværs af State Streets cloud- og on-premises-platforme, og byg sikre pipelines, integrationer og datalagre, der understøtter robust IT-drift.
Åbn
Senior Lead Data Engineer, Databricks
Niji
Led design og industrialisering af dataplatforme til analyse, maskinlæring og generativ AI hos Niji, et digitalt teknologi- og konsulenthus. Rollen kombinerer teknisk ledelse inden for Databricks med mentorstøtte til ingeniører og rådgivning af kunder.
Åbn
Azure-dataingeniør
Infotree Global SolutionsOpbyg og vedligehold Azure-dataplatforme for en kunde hos Infotree Global Solutions, og brug Terraform til at automatisere cloudinfrastruktur og forbedre DevOps-pipelines og driftssikkerhed.
Åbn
Dataingeniør — Harmoney, Gent (hybrid)
Harmoney
Belgien3.250 € – 5.600 € / måned
HybridFuldtidMellemniveauSeniorPåkrævet Sprog: engelskPåkrævet Sprog: nederlandskDataingeniørFå ansvar for Harmoneys datalager og BI-økosystem, og understøt analyser af SaaS til compliance, kapacitetsplanlægning for kunder og automatiseret fakturering. Arbejd hybrid fra kontoret i Gent.
Åbn
Dataingeniør (Azure, Spark) – fjernarbejde i Ukraine
Sigma Software Group
Byg skalerbare Azure-dataplatforme og datapipelines til analyse, rapportering og datadrevne beslutninger. Udvikl Spark-arbejdsgange og pålidelig databehandling i samarbejde med flere teams.
Åbn
Dataingeniør på mellemniveau (Azure, Spark) – fjernarbejde i Polen
Sigma Software GroupByg dataplatforme i Azure og skalerbare pipelines til analyser og drift. Udvikl Spark-arbejdsgange, datamodeller og pålidelige cloudløsninger til data.
Åbn
Dataingeniør med hebraisk
AllCloud
RumænienFjernarbejdeFuldtidMellemniveauSeniorPåkrævet Sprog: engelskPåkrævet Sprog: hebraiskDataingeniørByg AWS-lakehouseplatforme, datapipelines og AI-løsninger til AllClouds cloudkonsulentkunder. Design skalerbare arkitekturer, og hjælp kunder med at modernisere deres datasystemer.
Åbn
Senior løsningsarkitekt inden for bevægelsesstyring
Ralliant
Udform arkitekturer for software, styring og elektromekanik til præcis bevægelsesstyring og industriel automation. Samarbejd med globale ingeniørteams i Shanghai.
Åbn
Remote DevOps-ingeniør i Brasilien
Time DoctorDrift Time Doctors Google Cloud-infrastruktur på tværs af mere end 40 Terraform-miljøer. Automatisér udrulninger, sikkerhed og observerbarhed for virksomhedens globale platform til arbejdsstyrkeanalyse.
Åbn