Senior dataingeniør innen sky og analyse
ADEAL Systems GmbHBygg løsninger for sky, data og analyse hos ADEAL Systems, med teknisk ansvar for arkitektur, datapipelines og kundeprosjekter.
Åpne
Visa er et globalt teknologiselskap innen betalinger som betjener forbrukere, handelsbedrifter, finansinstitusjoner og myndigheter gjennom sitt elektroniske betalingsnettverk. Plattformen støtter kreditt-, debet- og forhåndsbetalte transaksjoner, i tillegg til betalingsbehandling, forebygging av svindel, sikkerhet, analyse og andre tjenester for forbrukere og bedrifter. Visa utvikler også nye betalingsløsninger, blant annet AI-baserte initiativer innen handel, og støtter finansiell inkludering gjennom Visa Foundation.
Senior dataingeniør, datasjø (fjernarbeid i Brasil)
Bygg og vedlikehold Spark-, Databricks- og Airflow-pipelines for Visas virksomhetsdatasjø. Forbedre datakvalitet, orkestrering og pålitelig selvbetjent tilgang til data.
Beskrivelse
- Utvikle, teste og vedlikeholde Databricks-pipelines for innlasting, transformasjon og datakvalitet med PySpark og SparkSQL.
- Opprette og oppdatere MWAA Airflow-DAG-er for å orkestrere dataarbeidsflyter.
- Skrive og optimalisere SQL for transformerings- og valideringsoppgaver.
- Implementere og overvåke datakvalitetskontroller med Great Expectations eller et tilsvarende verktøy.
- Bidra i kodegjennomganger.
- Feilsøke pipelinefeil og problemer med datakvalitet med støtte fra senioringeniører.
- Opprette og oppdatere dokumentasjon for datasett og pipelines.
- Delta i sprintplanlegging, estimering og retrospektiver.
- Følge teamets standarder for CI/CD, testing og styring.
- Bidra til å styrke påliteligheten og kvaliteten i Visas virksomhetsdatasjø.
Krav
- Være basert i Brasil.
- Kommunisere på engelsk på B2-nivå eller høyere (øvre mellomnivå).
- Ha minst 3 års relevant erfaring med en bachelor- eller fagskolegrad, eller minst 5 års relevant erfaring.
- Bruke Python til automatisering og databehandling.
- Forstå batchbaserte datapipelines og ETL/ELT-mønstre.
- Kjenne det grunnleggende i Apache Spark, inkludert PySpark eller SparkSQL.
- Arbeide med Databricks-jobber, arbeidsflyter, klyngeadministrasjon og ytelsesoptimalisering.
- Bruke SQL på middels til avansert nivå, inkludert joins, vindusfunksjoner og CTE-er.
- Forstå design av datasjøer i Amazon S3, inkludert partisjonering, layout og livssyklusstyring.
- Kjenne sentrale AWS-konsepter, inkludert S3, IAM og CloudWatch.
- Forstå dimensjonell modellering eller Kimball-modellering samt arkitekturer med medallion-lag.
- Bruke Git/GitHub-arbeidsflyter og delta i kodegjennomganger.
- Foretrukket: erfaring med Delta Lake, Apache Airflow/MWAA, CDC-mønstre, datakvalitetskonsepter, grunnleggende Terraform eller BI-integrasjon som Superset og dashboarding.
Fordeler
- Fjernarbeidsordning.
- Mulighet til å gjøre en forskjell i stor skala.
- Faglig utvikling og kompetanseutvikling gjennom meningsfylt arbeid.
- Fjernansatte kan få planlagte muligheter med forhåndsvarsel til å arbeide fra et Visa-kontor.
Relaterte jobber
Prosjektleder for fjernbasert datamigreringsprosjekt hos TEKsystems
TEKsystems
USA
Washington65 $ – 75 $ / time
FjernarbeidKontraktMellomnivåSeniorPåkrevd Språk: engelskDataingeniørLed virksomhetens datainitiativer, rapportmigreringer og brukeradopsjon hos TEKsystems. Følg opp prosjektmilepæler, risikoer, avhengigheter og kommunikasjon med interessenter i en fjernbasert rolle.
Åpne
Prosjektleder for integrasjon av ekstern dataplattform
TEKsystemsUSAWashington65 $ – 75 $ / time
FjernarbeidKontraktMellomnivåSeniorPåkrevd Språk: engelskDataingeniørKoordiner virksomhetsomfattende datainitiativer, rapportmigreringer og brukeradopsjon for TEKsystems' kunder innen teknologitjenester. Støtt styring, prosjektoppfølging og leveranser på tvers av forretnings- og tekniske team.
Åpne
Programvareingeniør, dataplattform
Nym
Bygg datapipelines og plattforminfrastruktur i AWS for Nyms motor for medisinsk koding. Styrk leveranser, observerbarhet, pålitelighet og sikkerhet i systemer som håndterer pasientdata.
Åpne
Principal maskinlæringsingeniør, generativ KI (fjernarbeid, USA)
LifelancerLed proof of concept-prosjekter innen LLM, agentbasert KI og maskinlæring for Amgens virksomhet innen bioteknologiske legemidler. Gjør validerte løsninger om til applikasjoner som er klare for hele virksomheten.
Åpne
Senior maskinlærings- og AI-ingeniør
AmbushBygg produksjonsklare generative AI- og agentarbeidsflyter for Ambushs kunder innen finansielle tjenester. Utvikle Python- og FastAPI-tjenester, SQL-dataarbeidsflyter, RAG-løsninger og skybaserte AI-systemer.
Åpne
Senior programvareingeniør innen maskinlæring
GFN
TysklandFjernarbeidHeltidMellomnivåSeniorPåkrevd Språk: tyskPåkrevd Språk: engelskMaskinlæringsingeniørBygg backendinfrastruktur og AI-støttede læringsprodukter for GFN, en tysk utdanningstilbyder. Utvikle skalerbare utdanningsplattformer med vekt på robust programvarearkitektur og praktisk maskinlæring.
Åpne
AI-ingeniør, LLM-agenter
Upwind SecurityUtvikle og sette i produksjon LLM-agenter for Upwind Securitys plattform for skysikkerhet. Undersøk, evaluer og bygg autonome arbeidsflyter for å undersøke og håndtere trusler under kjøring.
Åpne
Prosjektleder for dataprogrammer på avstand – Washington
TEKsystemsKoordiner virksomhetens datainitiativer, rapportmigreringer og innføring av nye prosesser og rapporteringsløsninger for TEKsystems. Følg opp prosjektfremdrift, risikoer, leveranser og kommunikasjon med interessenter fra forretning og tekniske fagmiljøer.
Åpne
Data-prosjektleder på avstand
TEKsystemsLed enterprise-dataprogrammer, blant annet datastyring, rapportmigrering, brukerinnføring og koordinering på tvers av team. Helt fjernbasert konsulentstilling med base i Seattle, Washington.
Åpne