Grupo EASY
Grupo EASY
11 – 50 Employés
B2BConseil
Grupo EASY est un cabinet de conseil aux entreprises qui aide les organisations à améliorer le fonctionnement et les performances de leurs équipes. Il associe conseil, développement des compétences et solutions organisationnelles concrètes pour répondre aux problématiques des organisations et soutenir l’amélioration continue des résultats des équipes.

Ingénieur·e senior en données (Google Cloud) — Grupo EASY, télétravail au Brésil

Concevez des pipelines de données évolutifs sur Google Cloud pour Grupo EASY, en intégrant des sources Oracle, SQL Server et AWS. Élaborez des modèles analytiques dans BigQuery destinés aux équipes métier.

Description

  • Concevoir et optimiser des pipelines batch et streaming sur Google Cloud.
  • Créer et maintenir des solutions d’ingénierie des données fiables et évolutives.
  • Intégrer des données provenant d’Oracle (OCI), de SQL Server sur site et d’AWS S3.
  • Assurer la qualité et l’évolutivité des données, ainsi que leur supervision et leur gouvernance.
  • Réduire les coûts de stockage et de traitement.
  • Préparer des données exploitables par les équipes métier pour les équipes de Data Science et d’analyse de données.
  • Utiliser Dataflow pour extraire et transformer les données d’Oracle et de SQL Server, puis les charger dans BigQuery.
  • Organiser les modèles analytiques BigQuery en couches Raw, Bronze, Silver et Gold.
  • Configurer des workflows Cloud Composer avec des exécutions ordonnées, une supervision et une gestion des échecs.
  • Cataloguer les tables, les métadonnées et les actifs de données avec Dataplex et/ou Data Catalog.

Exigences

  • Solide expérience de Google Cloud Platform (GCP).
  • De 3 à 5 ans d’expérience professionnelle.
  • Maîtrise de Python.
  • Solides compétences en SQL, notamment sur BigQuery.
  • Expérience du contrôle de versions avec Git et de la CI/CD.
  • Expérience de BigQuery, Dataflow, Dataproc et Pub/Sub.
  • Expérience dans la création de pipelines ETL/ELT batch et en temps réel.
  • Expérience de l’intégration d’Oracle, de SQL Server et de MySQL via JDBC ou des solutions personnalisées.
  • Expérience de Cloud Storage et des lacs de données.
  • Connaissance du partitionnement et du clustering dans BigQuery.
  • Connaissance de Dataproc (Spark/Hadoop) et des bases de données NoSQL telles que Bigtable et Firestore.
  • Expérience de dbt ou Dataform.
  • Expérience de Cloud Composer (Airflow) ou Workflows.
  • Connaissance de Cloud Functions et Cloud Run.
  • Un diplôme de premier cycle est souhaité.
  • Une expérience ou des connaissances des systèmes d’information de santé ou hospitaliers sont un atout.

Avantages

  • Emploi à temps plein.
  • Participation à des projets stimulants et innovants.
  • Intégration à une équipe hautement qualifiée.
  • Culture collaborative favorisant l’apprentissage continu.
  • Possibilités d’évolution professionnelle.

Offres similaires

ioasys

Ingénieur data chez ioasys

ioasys
201 – 500 Employés
ConseilHôtellerieMarketing

Créez et gérez des plateformes de données pour ioasys, en travaillant avec Databricks, des services cloud et des pipelines de données. Améliorez les lacs et entrepôts de données ainsi que les solutions DevOps.

Ouvrir