Avanade
Avanade
Avanade tilbyr skybaserte verktøy for lenkehåndtering og digitale forbindelser for virksomheter. Plattformen støtter URL-forkorting, merkevarede lenker, QR-koder – inkludert dynamiske formater og GS1 Digital Link – mobile landingssider, digitale visittkort, UTM-sporing av kampanjer, lenkeanalyse, API-er og integrasjoner. Funksjonene hjelper markedsførings-, utvikler- og kundeserviceteam med å opprette, administrere og måle kundeinteraksjoner på tvers av digitale kanaler, med sikkerhets- og samsvarsfunksjoner rettet mot virksomheter.

Dataingeniørkonsulent – Databricks og Azure (på stedet i Melbourne)

Bygg skalerbare datapipelines i Azure og PySpark-transformasjoner med Databricks. Støtt analyse- og datavitenskapsprogrammer innen finansielle tjenester.

Beskrivelse

  • Opprett og forbedre skalerbare pipelines for datainnhenting med Azure Data Factory, Databricks og Apache Spark
  • Utvikle og vedlikehold PySpark-notebooks for dataforberedelse, transformasjon og berikelse som støtter datavitenskapelige initiativer
  • Samarbeid med dataforskere for å avklare krav og levere pålitelige, strukturerte datasett til avtalt tid
  • Etabler datakvalitetskontroller, valideringsregler og overvåkingsprosesser
  • Koble til og behandle strukturerte, semistrukturerte og ustrukturerte datakilder
  • Bruk standarder for sikkerhet, datastyring og overholdelse av bankregelverk på dataløsninger
  • Optimaliser Azure Spark-arbeidsbelastninger for å forbedre ytelsen og kontrollere kostnadene
  • Bidra til kodegjennomganger, økter for løsningsdesign og agile seremonier
  • Vedlikehold dokumentasjon som dekker pipelines, arbeidsflyter og tekniske beslutninger

Krav

  • Ha minst tre års praktisk erfaring med Azure Databricks
  • Ha solid kompetanse innen Apache Spark, særlig PySpark for distribuert behandling
  • Ha erfaring med Azure Data Factory, Azure Synapse, Azure Blob Storage og Delta Lake
  • Forstå ETL/ELT-arbeidsflyter, datamodellering og prinsipper for datavarehus
  • Bruke Python og/eller Scala til databehandling
  • Erfaring med CI/CD-arbeidsflyter ved bruk av Azure DevOps, Git og Terraform er en fordel
  • Være kjent med SQL, NoSQL og data lake-arkitekturer
  • Forstå praksis for datastyring, sikkerhet og etterlevelse innen finansielle tjenester
  • Ha sterke analytiske evner og problemløsningsevner
  • Kommunisere effektivt med interessenter
  • Arbeide produktivt på tvers av fagområder
  • Ha en agil arbeidsmåte og erfaring med Scrum eller lignende arbeidsmiljøer
  • Ha australsk statsborgerskap
  • Være kvalifisert til å få sikkerhetsklarering
  • Bachelor- eller mastergrad i datavitenskap, informasjonssystemer, ingeniørfag eller et beslektet fagområde er en fordel
  • Databricks Certified Data Engineer Associate- eller Professional-sertifisering er en fordel
  • Erfaring fra bank- eller finanssektoren er svært ønskelig

Relaterte jobber

Advocate Aurora Health

Praksisplass innen HR

Advocate Aurora Health

Støtt rekruttering, onboarding, medarbeiderengasjement og HR-drift hos Advocate Aurora Health. Få praktisk erfaring med HR-systemer, rapportering og prosessforbedring i en praksisplass på avstand.

Åpne