AVANTTi
AVANTTi
AVANTTi är ett brasilianskt teknikserviceföretag som hjälper organisationer att omvandla teknik- och innovationsinitiativ till mätbart affärsvärde. Tjänsterna omfattar bland annat IT-bemanning och talangförsörjning, snabb sammansättning av team, leverans från programvarufabrik med teknik som ABAP, Java och .NET samt portfölj- och SAFe-hantering genom företagets VMO-metodik (Value Management Office). AVANTTi stödjer digital transformation och leverans av företags-IT för organisationer inom bland annat bank, tillverkningsindustri, logistik, detaljhandel och utbildning, med verksamhet i Curitiba, São Paulo och Rio de Janeiro.

Senior dataingenjör inom Azure Databricks

Senior dataingenjör på AVANTTi som bygger datapipelines och ETL/ELT-arbetsflöden i Azure Databricks. Bidrar till skalbara företagssystem för data, analys och affärsbehov.

Beskrivning

  • Bygg och optimera datapipelines med Azure Databricks, PySpark, Azure Data Factory, Python och Azure Data Lake.
  • Utveckla och underhåll ETL/ELT-arbetsflöden för företagsintegration och analys.
  • Läs in, omvandla, validera och stäm av data från flera system.
  • Profilera och analysera data för att identifiera kvalitetsproblem och säkerställa konsekvens och tillförlitlighet.
  • Skriv och optimera komplexa SQL-frågor för effektiv databehandling.
  • Felsök och förbättra prestandan i storskaliga arbetsbelastningar.
  • Lös produktionsincidenter på nivå 2 som påverkar Azure Data Factory-pipelines, Databricks-jobb och dataarbetsflöden.
  • Övervaka och stödja produktionspipelines för att upprätthålla tillgänglighet, skalbarhet och driftseffektivitet.
  • Hjälp till med driftsättningar och releaser i utvecklings-, test- och produktionsmiljöer.
  • Samordna prioriteringar mellan projekt, arbeta självständigt och hålla deadlines.

Krav

  • Mer än åtta års erfarenhet av data engineering.
  • Dokumenterad erfarenhet av data engineering och ETL-utveckling.
  • Gedigen praktisk erfarenhet av Azure Databricks och Azure Data Factory (ADF).
  • Avancerade kunskaper i utveckling av ETL/ELT och datatransformering.
  • Avancerade SQL-kunskaper, inklusive att skriva, optimera och finjustera komplexa frågor.
  • Erfarenhet av Python och PySpark.
  • Erfarenhet av Azure Data Lake och företagsintegration av data.
  • Erfarenhet av dataanalys, validering, profilering och kvalitetssäkring.
  • Erfarenhet av att stödja, övervaka och felsöka produktionspipelines.
  • Förmåga att arbeta självständigt, vara organiserad och hantera prioriteringar.
  • Mycket god muntlig och skriftlig kommunikationsförmåga.
  • Avancerade kunskaper i engelska.
  • Meriterande: erfarenhet av CI/CD-pipelines och DevOps-metoder.
  • Meriterande: kännedom om Git, Azure DevOps eller jämförbara verktyg för versionshantering och driftsättning.
  • Meriterande: kännedom om verktyg för molnövervakning, loggning och observerbarhet.

Förmåner

  • Anställning enligt CLT-avtal.
  • Helt distansarbete.

Relaterade jobb

Hitss Brasil

Cloudarkitekt på mellannivå – Kubernetes och OpenShift

Hitss Brasil
5 001 – 10 000 Anställda
KonsultverksamhetLogistikMarknadsföring

Stöd Hitss Brasils moln- och containermiljöer med fokus på Kubernetes och Red Hat OpenShift. Sätt standarder för plattformsarkitektur och automatisera konfiguration med Ansible för att bidra till en tillförlitlig drift.

Öppna