EUROPEAN DYNAMICS utvikler programvare for e-forvaltning og leverer IT-tjenester til institusjoner, organisasjoner og store virksomheter over hele verden. Porteføljen omfatter blant annet elektroniske sivil- og virksomhetsregistre, systemer for håndtering av finansielle data, plattformer for offentlige anskaffelser, skyløsninger, konsulenttjenester, skreddersydd programvareutvikling og outsourcing. Selskapet investerer også i forskning og utvikling med fokus på nye informasjons- og kommunikasjonsteknologier og bidrar i internasjonale prosjekter. Med virksomhet i mer enn 47 land legger EUROPEAN DYNAMICS vekt på kvalitet og sikkerhet i produktene og tjenestene sine.
Bygg og optimaliser datapipelines med dbt, PySpark og Apache Iceberg for europeiske teknologiprosjekter i offentlig sektor. Stillingen er hybrid med base i Brussel, og arbeidet foregår hos selskapet eller kunden.
Bygg pålitelige og skalerbare datapipelines og arbeidsflyter for datatransformering.
Forbedre ytelsen og kjøretidene til dbt-prosjekter.
Opprett og dokumenter datakvalitetskontroller og kontrolltester i dbt.
Sett opp automatiserte regresjonstester og validering for å opprettholde kvaliteten og konsistensen i pipeline-resultatene.
Del teamets arbeidsmåter for vedlikehold og videreutvikling av dbt-prosjekter.
Gjør forretningskrav og analysedokumenter om til operative datapipelines for datatransformering.
Samarbeid på stedet med utviklingsteamet og IT-teamet til en større kunde.
Krav
Universitetsgrad innen informatikk, informasjonsteknologi, systemteknikk eller et beslektet fagområde, samt minst 12 års relevant IT-erfaring.
Praktisk erfaring med dbt, helst dbt Core, for å utforme, vedlikeholde, teste, dokumentere og utvide produksjonsprosjekter for analytisk datatransformering.
Erfaring med analytics engineering og moderne datamodellering, inkludert lagdelte arkitekturer, gjenbrukbare makroer, datakvalitetskontroller og CI/CD.
Erfaring med å skrive PySpark-transformasjoner for storskala databehandling; optimalisering av Spark-jobber er en fordel.
Praktisk erfaring med Apache Iceberg, inkludert partisjonering, skjemautvikling, håndtering av øyeblikksbilder og time travel.
Erfaring med verktøy for jobborkestrering og planlegging, for eksempel Dagster.
God kjennskap til SAS ETL og eldre kodebaser; migrering av SAS-arbeidsflyter til dbt er en stor fordel.
Svært gode SQL-ferdigheter, inkludert komplekse transformasjoner, ytelsesoptimalisering og inkrementell behandling.
God forståelse av Apache Spark-kjøring, partisjonering, optimalisering av filstruktur og ytelsesjustering.
God kjennskap til datavalidering, avstemming og testing ved migrering av eldre systemer til dbt og PySpark.
Kunnskap om versjonskontroll og samarbeidende utvikling, inkludert Git, kodegjennomganger, releasehåndtering og automatiserte utrullingspipelines.
Svært gode engelskkunnskaper.
Fordeler
Konkurransedyktig lønn basert på kvalifikasjoner og erfaring.
Mulighet til å velge mellom kontraktsarbeid og en godtgjørelsespakke med fullstendige fordeler.
Konfidensiell søknadsprosess.
Internasjonalt, flerspråklig og flerkulturelt arbeidsmiljø.
Bygg skalerbare datapipelines med dbt, PySpark og Iceberg. Støtt europeiske institusjoner med analytics engineering, testing og migrering fra eldre SAS-systemer.