AVANTTi
AVANTTi
AVANTTi er et brasiliansk teknologitjenesteselskap som hjelper organisasjoner med å omsette teknologi- og innovasjonsinitiativer til målbar forretningsverdi. Tjenestene omfatter blant annet IT-bemanning og rekruttering av talenter, rask etablering av team, leveranser fra programvarefabrikk med teknologier som ABAP, Java og .NET samt portefølje- og SAFe-styring gjennom selskapets VMO-metodikk (Value Management Office). AVANTTi støtter digital transformasjon og levering av virksomhets-IT for organisasjoner innen blant annet bank, produksjon, logistikk, detaljhandel og utdanning, med virksomhet i Curitiba, São Paulo og Rio de Janeiro.

Senior dataingeniør innen Azure Databricks

Senior dataingeniør hos AVANTTi som bygger datapipelines og ETL/ELT-arbeidsflyter i Azure Databricks. Bidrar til skalerbare virksomhetssystemer for data, analyse og forretningsbehov.

Beskrivelse

  • Bygg og optimaliser datapipelines med Azure Databricks, PySpark, Azure Data Factory, Python og Azure Data Lake.
  • Utvikle og vedlikehold ETL/ELT-arbeidsflyter for virksomhetsintegrasjon og analyse.
  • Les inn, transformer, valider og avstem data fra flere systemer.
  • Profiler og analyser data for å identifisere kvalitetsproblemer og sikre konsistens og pålitelighet.
  • Skriv og finjuster komplekse SQL-spørringer for effektiv databehandling.
  • Feilsøk og forbedre ytelsen på tvers av arbeidsbelastninger i stor skala.
  • Løs produksjonshendelser på nivå 2 som påvirker Azure Data Factory-pipelines, Databricks-jobber og dataarbeidsflyter.
  • Overvåk og støtt produksjonspipelines for å opprettholde tilgjengelighet, skalerbarhet og driftseffektivitet.
  • Bidra til utrullinger og lanseringer på tvers av utviklings-, staging- og produksjonsmiljøer.
  • Koordiner prioriteringer på tvers av prosjekter, arbeid selvstendig og overhold frister.

Krav

  • Mer enn åtte års erfaring med data engineering.
  • Dokumentert erfaring med data engineering og ETL-utvikling.
  • Solid praktisk erfaring med Azure Databricks og Azure Data Factory (ADF).
  • Avanserte ferdigheter innen utvikling av ETL/ELT og datatransformasjon.
  • Avanserte SQL-ferdigheter, inkludert å skrive, optimalisere og finjustere komplekse spørringer.
  • Erfaring med Python og PySpark.
  • Erfaring med Azure Data Lake og virksomhetsintegrasjon av data.
  • Erfaring med dataanalyse, validering, profilering og kvalitetssikring.
  • Erfaring med å støtte, overvåke og feilsøke produksjonspipelines.
  • Evne til å arbeide selvstendig, være organisert og håndtere prioriteringer.
  • Gode muntlige og skriftlige kommunikasjonsevner.
  • Avanserte engelskkunnskaper.
  • Ønskelig: erfaring med CI/CD-pipelines og DevOps-praksis.
  • Ønskelig: kjennskap til Git, Azure DevOps eller tilsvarende verktøy for versjonskontroll og utrulling.
  • Ønskelig: kjennskap til verktøy for skyovervåking, logging og observerbarhet.

Fordeler

  • Ansettelse på CLT-kontrakt.
  • Fullt fjernarbeid.

Relaterte jobber

Hitss Brasil

Cloudarkitekt på mellomnivå – Kubernetes og OpenShift

Hitss Brasil
5 001 – 10 000 Ansatte
LogistikkMarkedsføringRådgivning

Støtt Hitss Brasils sky- og containermiljøer med fokus på Kubernetes og Red Hat OpenShift. Fastsett standarder for plattformarkitektur og automatiser konfigurasjon med Ansible for å bidra til pålitelig drift.

Åpne