Applaudo
Applaudo
501 – 1 000 Employés
ConseilLogistiqueMarketing
Applaudo est une entreprise de développement logiciel nearshore qui aide les organisations à moderniser leurs technologies et à faire progresser leur transformation numérique. Fondée en 2013, l’entreprise associe une expertise en ingénierie logicielle et en conseil dans des domaines tels que l’innovation et la conception d’expériences, le développement et la maintenance d’applications, l’assurance qualité, les solutions cloud, l’intelligence artificielle, la cybersécurité, les solutions de données et la modernisation des applications. Applaudo accompagne des clients dans des secteurs comme le sport, les médias et le divertissement, le commerce de détail, les biens de consommation emballés et les services financiers, en soutenant des projets qui améliorent les produits numériques, les infrastructures et la fourniture de services informatiques. Basée à Austin, au Texas, et disposant d’un bureau à San Salvador, Applaudo réunit une équipe de 501 à 1 000 employés au service d’entreprises de l’ensemble du secteur des technologies et des services numériques.

Ingénieur senior en données Azure Databricks

Développez des pipelines avec Azure Databricks et Python pour les solutions d’entreprise basées sur l’IA d’Applaudo. Reliez les données métier à des hubs et entrepôts de données évolutifs et fiables.

Description

  • Développer et maintenir des pipelines de données prêts pour la production avec Azure Databricks et Python.
  • Créer des transformations évolutives avec PySpark ou Spark SQL.
  • Ingérer et traiter des données provenant d’API, de bases de données relationnelles, du stockage cloud et de SFTP.
  • Relier les plateformes d’entreprise de gestion des tickets, CRM, marketing, commerce de détail et autres à un Data Hub centralisé.
  • Développer et maintenir des structures d’entrepôt de données, des modèles dimensionnels et des magasins de données.
  • Écrire, optimiser et maintenir des transformations SQL.
  • Ajouter des validations de la qualité des données et des contrôles de cohérence.
  • Créer et maintenir des flux de données sortants pour des systèmes tiers.
  • Examiner les écarts de données et résoudre les problèmes de pipeline.
  • Documenter les pipelines, la logique de transformation, les dépendances et les processus techniques.
  • Collaborer avec les collègues et les parties prenantes pour clarifier les exigences et repérer les risques.
  • Communiquer rapidement l’avancement, les blocages et les retards potentiels, et proposer des mesures pour respecter les échéances.

Exigences

  • Au moins cinq ans d’expérience professionnelle en ingénierie des données.
  • Solide expérience pratique d’Azure Databricks.
  • Maîtrise avancée de Python pour le traitement et la transformation des données ainsi que le développement de pipelines.
  • Solide expérience d’Apache Spark, notamment de PySpark et/ou Spark SQL.
  • Maîtrise avancée de SQL, notamment des transformations complexes, de la validation des données et de l’optimisation des performances des requêtes.
  • Solide connaissance des entrepôts de données et de la modélisation dimensionnelle, notamment des faits, des dimensions et des magasins de données.
  • Expérience de l’intégration de données provenant d’API REST, de bases de données relationnelles, du stockage cloud et de SFTP.
  • Expérience pratique des services de données Microsoft Azure pour l’ingestion, le stockage, le traitement et l’intégration.
  • Expérience de la mise en œuvre de contrôles de qualité des données et de la validation de la cohérence entre les systèmes sources et les modèles de données cibles.
  • Capacité à diagnostiquer les défaillances de pipeline, à examiner les écarts de données et à mettre en œuvre des corrections fiables.
  • Solides capacités d’analyse, de résolution de problèmes et d’organisation.
  • Capacité à travailler de manière autonome, à prendre ses responsabilités et à respecter les pratiques d’ingénierie et les normes de documentation.
  • Bonne communication en anglais et capacité à travailler avec une équipe basée aux États-Unis.
  • Une expérience de la migration de charges de travail SQL vers Azure Databricks est un plus.

Avantages

  • Possibilité de travailler à distance.
  • Possibilités d’apprendre rapidement et de travailler avec des équipes compétentes.
  • Méthodes de travail modernes.
  • Contribuer à une transformation à grande échelle fondée sur l’IA.

Offres similaires

Aucune offre d’emploi trouvée

Essayez de modifier ou d’effacer vos filtres pour trouver plus d’opportunités.