
Applaudo er et nearshore-selskap innen programvareutvikling som hjelper organisasjoner med å modernisere teknologien og fremme digital omstilling. Selskapet ble grunnlagt i 2013 og kombinerer ekspertise innen programvareutvikling og rådgivning på områder som innovasjon og opplevelsesdesign, utvikling og vedlikehold av applikasjoner, kvalitetssikring, skyløsninger, kunstig intelligens, cybersikkerhet, dataløsninger og modernisering av apper. Applaudo betjener kunder innen blant annet sport, medier og underholdning, detaljhandel, forbruksvarer og finansielle tjenester. Selskapet støtter prosjekter som forbedrer digitale produkter, infrastruktur og levering av IT-tjenester. Med hovedkontor i Austin, Texas, og et kontor i San Salvador samler Applaudo et team på 501–1 000 medarbeidere som betjener virksomheter innen teknologi og digitale tjenester.
Senior dataingeniør innen Azure Databricks
Bygg datapipelines i Azure Databricks og Python for Applaudos AI-drevne bedriftsløsninger. Koble bedriftskilder til pålitelige datavarehus og en sentral Data Hub.
Beskrivelse
- Bygg og vedlikehold datapipelines for produksjon med Azure Databricks og Python.
- Lag skalerbare datatransformasjoner med PySpark eller Spark SQL.
- Hent inn og behandle data fra API-er, relasjonsdatabaser, skylagring og SFTP.
- Samle data fra saksbehandling, CRM, markedsføring, detaljhandel og andre bedriftsplattformer i en sentral Data Hub.
- Utvikle og vedlikehold datavarehusstrukturer, dimensjonsmodeller og datamarter.
- Skriv, optimaliser og vedlikehold SQL-transformasjoner.
- Legg til validering av datakvalitet og kontroller av datakonsistens.
- Opprett og vedlikehold utgående dataflyter for tredjepartssystemer.
- Undersøk dataavvik og løs problemer i datapipelines.
- Dokumenter pipelines, transformasjonslogikk, avhengigheter og tekniske prosesser.
- Samarbeid med kolleger og interessenter for å avklare behov, synliggjøre risikoer og levere pålitelige dataløsninger.
- Del tidlig informasjon om fremdrift, hindringer og mulige forsinkelser, og foreslå neste steg.
Krav
- Minst fem års yrkeserfaring innen data engineering.
- Solid praktisk erfaring med Azure Databricks.
- Avanserte Python-ferdigheter innen databehandling, transformasjon og utvikling av datapipelines.
- Solid erfaring med Apache Spark, inkludert PySpark og/eller Spark SQL.
- Avanserte SQL-ferdigheter, inkludert komplekse transformasjoner, datavalidering og optimalisering av spørringer.
- Solid kunnskap om datavarehus og dimensjonsmodellering, inkludert fakta, dimensjoner og datamarter.
- Erfaring med å koble til REST-API-er, relasjonsdatabaser, skylagring og SFTP.
- Praktisk erfaring med Microsoft Azure-datatjenester.
- Erfaring med å legge til datakvalitetskontroller og validere konsistens mellom kildesystemer og målmodeller.
- Evne til å diagnostisere pipelinefeil og undersøke dataavvik.
- Evne til å jobbe selvstendig, ta eierskap og følge praksis for utvikling og dokumentasjon.
- Gode engelskkunnskaper.
- Evne til å samarbeide effektivt med et USA-basert team.
- Erfaring med migrering av SQL-arbeidsbelastninger til Azure Databricks er en fordel.
Fordeler
- Mulighet for fjernarbeid.
- Mulighet til å lære raskt og ta ansvar.
- Jobb sammen med dyktige team.
- Investering i moderne arbeidsmåter.
- Delta i en AI-native transformasjon i stor skala.
Relaterte jobber
Ingen jobber funnet
Prøv å justere eller tømme filtrene for å finne flere muligheter.