EUROPEAN DYNAMICS ontwikkelt e-governmentsoftware en levert wereldwijd IT-diensten aan instellingen, organisaties en grote ondernemingen. Het portfolio omvat elektronische registers voor burgers en bedrijven, systemen voor financieel gegevensbeheer, platforms voor overheidsaanbestedingen, cloudoplossingen, adviesdiensten, softwareontwikkeling op maat en outsourcing. Het bedrijf investeert daarnaast in onderzoek en ontwikkeling op het gebied van opkomende informatie- en communicatietechnologieën en draagt bij aan internationale projecten. Met activiteiten in meer dan 47 landen legt EUROPEAN DYNAMICS de nadruk op kwaliteit en veiligheid in zijn producten en diensten.
Bouw en optimaliseer dbt-, PySpark- en Apache Iceberg-datapipelines voor technologieprojecten in de Europese publieke sector. De hybride functie is gevestigd in Brussel, met werk op kantoor of bij klanten.
Bouw betrouwbare, schaalbare datatransformatie-pipelines en workflows.
Verbeter de prestaties en uitvoeringstijden van dbt-projecten.
Maak en documenteer dbt-datakwaliteitscontroles en controletests.
Richt geautomatiseerde regressietests en validatie in om de kwaliteit en consistentie van pipeline-uitvoer te waarborgen.
Deel teampraktijken voor het onderhouden en verder ontwikkelen van dbt-projecten.
Zet zakelijke vereisten en analysedocumenten om in operationele datatransformatie-pipelines.
Werk op locatie samen met het Development-team en het IT-team van een grote klant.
Vereisten
Een universitair diploma in informatica, informatietechnologie, systeemtechniek of een verwant vakgebied, plus minimaal 12 jaar relevante IT-ervaring.
Praktische ervaring met dbt, bij voorkeur dbt Core, voor het ontwerpen, onderhouden, testen, documenteren en uitbreiden van productieklare analytics-transformatieprojecten.
Ervaring met analytics engineering en moderne datamodellering, waaronder gelaagde architecturen, herbruikbare macro's, datakwaliteitscontroles en CI/CD.
Ervaring met het schrijven van PySpark-transformaties voor grootschalige gegevensverwerking; optimalisatie van Spark-jobs is een pluspunt.
Praktische ervaring met Apache Iceberg, waaronder partitie- en schema-evolutie, snapshotbeheer en time travel.
Ervaring met tools voor taakorkestratie en planning, zoals Dagster.
Grondige kennis van SAS ETL en oudere codebases; migratie van SAS-workflows naar dbt is een groot pluspunt.
Uitstekende SQL-vaardigheden, waaronder complexe transformaties, prestatieoptimalisatie en incrementele verwerking.
Goed begrip van de uitvoering van Apache Spark, partitionering, optimalisatie van de bestandsindeling en prestatieafstemming.
Grondige kennis van datavalidatie, reconciliatie en testen bij migraties van oudere systemen naar dbt en PySpark.
Kennis van versiebeheer en gezamenlijk ontwikkelen, waaronder Git, code reviews, releasebeheer en geautomatiseerde deployment-pipelines.
Uitstekende beheersing van het Engels.
Voordelen
Een competitief salaris op basis van kwalificaties en ervaring.
Keuze uit werken op contractbasis of een vergoedingspakket met uitgebreide voordelen.
Vertrouwelijke sollicitatieprocedure.
Internationale, meertalige en multiculturele werkomgeving.
Bouw schaalbare datapijplijnen met dbt, PySpark en Iceberg. Ondersteun Europese instellingen met analytics engineering, testen en migratie van verouderde SAS-systemen.