EUROPEAN DYNAMICS
EUROPEAN DYNAMICS
501 – 1 000 Employés
ConseilLogistiqueMarketing
EUROPEAN DYNAMICS développe des logiciels d’administration électronique et fournit des services informatiques aux institutions, aux organisations et aux grandes entreprises du monde entier. Son portefeuille comprend des registres civils et commerciaux électroniques, des systèmes de gestion des données financières, des plateformes de marchés publics, des solutions cloud, du conseil, du développement de logiciels sur mesure et de l’externalisation. L’entreprise investit également dans la recherche et le développement axés sur les technologies émergentes de l’information et de la communication, et contribue à des projets internationaux. Présente dans plus de 47 pays, EUROPEAN DYNAMICS accorde une grande importance à la qualité et à la sécurité de ses produits et services.

Ingénieur senior en analytique de bases de données

Concevez et optimisez des pipelines de données avec dbt, PySpark et Apache Iceberg pour des projets technologiques du secteur public européen. Ce poste hybride est basé à Bruxelles, avec du travail dans les locaux de l’entreprise ou du client.

Description

  • Concevoir des pipelines et des flux de travail fiables et évolutifs pour la transformation des données.
  • Améliorer les performances des projets dbt et leurs temps d’exécution.
  • Créer et documenter des contrôles et des vérifications de qualité des données dans dbt.
  • Mettre en place des tests de régression et des validations automatisés afin de préserver la qualité et la cohérence des résultats des pipelines.
  • Partager les pratiques de l’équipe pour maintenir et faire évoluer les projets dbt.
  • Transformer les exigences métier et les documents d’analyse en pipelines opérationnels de transformation des données.
  • Collaborer sur site avec l’équipe de développement et l’équipe informatique d’un client majeur.

Exigences

  • Diplôme universitaire en informatique, technologies de l’information, ingénierie des systèmes ou dans un domaine connexe, et au moins 12 ans d’expérience pertinente en informatique.
  • Expérience pratique de dbt, de préférence dbt Core, pour concevoir, maintenir, tester, documenter et étendre des projets de transformation analytique en production.
  • Expérience en ingénierie analytique et en modélisation moderne des données, notamment des architectures en couches, des macros réutilisables, des contrôles de qualité des données et du CI/CD.
  • Expérience dans l’écriture de transformations PySpark pour le traitement de données à grande échelle ; l’optimisation des tâches Spark constitue un atout.
  • Expérience pratique d’Apache Iceberg, notamment de l’évolution des partitions et des schémas, de la gestion des snapshots et du voyage dans le temps.
  • Expérience des outils d’orchestration et de planification des tâches, tels que Dagster.
  • Solides connaissances de SAS ETL et des bases de code anciennes ; la migration de flux SAS vers dbt constitue un atout majeur.
  • Excellente maîtrise de SQL, notamment des transformations complexes, de l’optimisation des performances et du traitement incrémentiel.
  • Bonne compréhension de l’exécution d’Apache Spark, du partitionnement, de l’optimisation de l’organisation des fichiers et du réglage des performances.
  • Solides connaissances de la validation, du rapprochement et des tests de données lors de la migration de systèmes anciens vers dbt et PySpark.
  • Connaissances du contrôle de version et du développement collaboratif, notamment Git, les revues de code, la gestion des versions et les pipelines de déploiement automatisés.
  • Excellente maîtrise de l’anglais.

Avantages

  • Rémunération compétitive selon les qualifications et l’expérience.
  • Choix entre un travail sous contrat ou une formule de rémunération assortie d’avantages complets.
  • Processus de candidature confidentiel.
  • Environnement de travail international, multilingue et multiculturel.
  • Égalité des chances en matière d’emploi.

Offres similaires