GFT Technologies est une entreprise spécialisée dans les technologies et la transformation numérique, qui intervient dans les domaines du conseil, de l’assurance et de la cybersécurité. Sa plateforme Cookiebot aide les organisations à recueillir et à gérer le consentement des utilisateurs, tout en favorisant le respect des réglementations en matière de confidentialité, notamment le RGPD et le CCPA. Les solutions de l’entreprise sont conçues pour s’intégrer aux environnements numériques existants et sont utilisées par plus de 600 000 clients dans le monde pour gérer les données personnelles avec davantage de transparence et de contrôle.
Ingénieur de données Azure Databricks intermédiaire/senior – Télétravail depuis la Colombie
Concevez et optimisez des pipelines de données et des architectures cloud Azure et Databricks chez GFT Technologies. Préparez des données fiables pour l’analytique, l’intelligence artificielle et l’apprentissage automatique.
Description
- Concevoir, développer et optimiser des architectures de données basées sur Azure et Databricks
- Mettre en œuvre des processus ETL et ELT pour intégrer plusieurs sources d’information
- Concevoir et gérer des architectures Data Lake et Lakehouse
- Surveiller les pipelines de données afin de garantir leur cohérence, leur qualité, leur traçabilité et leur sécurité
- Préparer et optimiser des jeux de données pour l’analytique avancée, les rapports et les modèles d’apprentissage automatique
- Collaborer avec les équipes BI, analytiques et de science des données afin d’améliorer l’accès à l’information
- Définir et mettre en œuvre la gouvernance des données et les contrôles qualité
- Mettre en œuvre des processus d’intégration continue et de déploiement continu pour les solutions de données
- Concevoir des solutions évolutives pour le traitement distribué et les grands volumes de données
- Identifier des améliorations permettant d’optimiser les coûts, les performances et les temps de traitement
- Évaluer de nouvelles technologies et les bonnes pratiques pour faire progresser la plateforme de données
Exigences
- Diplôme en ingénierie des systèmes, en génie industriel, en génie électronique, en génie mécatronique ou dans un domaine connexe
- Trois à cinq ans d’expérience en tant qu’ingénieur de données
- Maîtrise avancée de SQL
- Expérience avec Python ou Scala
- Expérience du traitement distribué avec PySpark
- Expérience avec Azure Databricks
- Expérience avec Azure Data Factory
- Expérience avec Azure Data Lake Storage Gen2 (ADLS Gen2)
- Connaissance de Delta Lake
- Expérience avec les architectures Lakehouse
- Connaissance de l’architecture Medallion
- Expérience en modélisation dimensionnelle
- Expérience avec les bases de données relationnelles
- Expérience avec les bases de données NoSQL
- Connaissance de la gouvernance et de la qualité des données
- Expérience avec Unity Catalog
- Expérience avec Delta Live Tables (DLT)
- Connaissance de Great Expectations
- Expérience du traitement en continu via Event Hubs
- Expérience avec Azure DevOps et Git
- Connaissance d’Entra ID
- Connaissance du RBAC
- Maîtrise de Power BI
- Maîtrise de Visual Studio Code
- Expérience en intégration de données et en processus ETL/ELT
- Expérience en analyse et modélisation des données
- Les certifications Azure Data Engineering constituent un atout
- Une expérience des projets d’intelligence artificielle et d’apprentissage automatique constitue un atout
- Une connaissance de DataOps et de l’automatisation des plateformes de données constitue un atout
Avantages
- Horaires de travail flexibles
- Télétravail
- Plan personnalisé de développement de carrière
- Programmes de formation
- Travail au sein d’équipes pluridisciplinaires
- Équipe internationale diversifiée
- Projets à fort impact avec des clients leaders de leur secteur