EXL
EXL
EXL è un'azienda di consulenza e servizi alle imprese che aiuta le organizzazioni a utilizzare dati, analisi e tecnologia per migliorare le proprie attività e prendere decisioni più efficaci. Le sue attività comprendono la gestione operativa, l'analisi a supporto delle decisioni e la trasformazione digitale, con esperienza nei settori della sanità, delle assicurazioni, della finanza e della logistica. EXL combina la data science con una concreta esperienza aziendale per sviluppare soluzioni adatte agli obiettivi, al modello operativo e al contesto di ciascuna organizzazione.

Senior Data Engineer presso EXL - Lavoro da remoto negli Stati Uniti

Guida l’architettura di piattaforme dati cloud-native su scala petabyte presso EXL. Gestisci pipeline di dati, streaming, ottimizzazione analitica e leadership nell’ingegneria dei dati.

Descrizione

  • Definire la direzione architetturale e gli standard per pipeline di dati end-to-end scalabili, affidabili e sicure
  • Affiancare gli ingegneri, esaminare il codice e gestire le tempistiche di consegna dei prodotti dati
  • Tradurre i requisiti aziendali e tecnici in soluzioni dati pronte per la produzione insieme a Data Scientist, Analisti e stakeholder
  • Supportare Data Scientist e ML Engineer con l’accesso ai dati, lo sviluppo dei modelli e la garanzia della qualità dei dati
  • Creare e ottimizzare processi di ingestione e trasformazione ad alto volume con dbt Core e AWS Glue
  • Creare e mantenere pipeline modulari e riutilizzabili con orchestratori come Dagster
  • Gestire i flussi di dati in tempo reale tramite le piattaforme Confluent o i servizi di streaming AWS come Kinesis
  • Applicare pratiche di anonimizzazione dei dati e rispettare i requisiti di sicurezza e privacy
  • Implementare e mantenere Apache Iceberg per l’evoluzione degli schemi e la gestione dei dati
  • Migliorare le prestazioni delle query e controllare i costi su Snowflake, Amazon Redshift e AWS Athena
  • Aggiungere monitoraggio e osservabilità con Splunk per identificare i colli di bottiglia e risolvere i problemi di produzione

Requisiti

  • Almeno 10 anni di esperienza progressiva e pratica nell’ingegneria dei dati, nell’architettura dei dati o in un ruolo full-stack strettamente correlato
  • Solida conoscenza dei principi dell’ingegneria dei dati, dei modelli ETL/ELT e della gestione dei metadati
  • Esperienza comprovata nella creazione e gestione di infrastrutture su scala petabyte in ambienti cloud-native
  • L’esperienza nel settore assicurativo è preferibile ma non obbligatoria
  • Esperienza con i servizi AWS, inclusi S3, IAM e VPC
  • Esperienza con Talend, dbt Core, Iceberg, AWS Glue Catalog, Snowflake, Redshift, Athena, Splunk, servizi di streaming AWS e Git
  • Ottime competenze in SQL, PySpark e Python
  • Conoscenza operativa dei fondamenti di DataOps e DevOps

Benefit

  • Bonus annuale
  • Informazioni sui benefit disponibili all’indirizzo https://www.exlservice.com/us-careers-and-benefits
  • Lavoro da remoto / lavoro da casa