AVANTTi
AVANTTi
AVANTTi è un'azienda brasiliana di servizi tecnologici che aiuta le organizzazioni a trasformare le iniziative tecnologiche e di innovazione in valore misurabile per il business. I suoi servizi includono la fornitura di personale IT e la ricerca di talenti, la rapida formazione di squadre, la realizzazione di progetti tramite una software factory che utilizza tecnologie come ABAP, Java e .NET, nonché la gestione di portafogli e SAFe attraverso la metodologia VMO (Value Management Office). AVANTTi supporta la trasformazione digitale e l'erogazione di servizi IT aziendali per organizzazioni dei settori bancario, manifatturiero, logistico, della vendita al dettaglio e dell'istruzione, con attività a Curitiba, San Paolo e Rio de Janeiro.

Senior data engineer Azure Databricks

Senior data engineer presso AVANTTi, si occupa di creare pipeline Azure Databricks e flussi di lavoro ETL/ELT. Contribuisce a sistemi di dati aziendali scalabili per analisi e esigenze di business.

Descrizione

  • Creare e ottimizzare pipeline di dati con Azure Databricks, PySpark, Azure Data Factory, Python e Azure Data Lake.
  • Sviluppare e mantenere flussi di lavoro ETL/ELT per l’integrazione aziendale e l’analisi.
  • Acquisire, trasformare, convalidare e riconciliare dati provenienti da più sistemi.
  • Esaminare e analizzare i dati per individuare problemi di qualità e tutelarne coerenza e affidabilità.
  • Scrivere e ottimizzare query SQL complesse per elaborare i dati in modo efficiente.
  • Diagnosticare i problemi e migliorare le prestazioni dei carichi di lavoro su larga scala.
  • Risolvere incidenti di produzione di livello 2 che interessano pipeline Azure Data Factory, job Databricks e flussi di dati.
  • Monitorare e supportare le pipeline di produzione per garantirne disponibilità, scalabilità ed efficienza operativa.
  • Supportare distribuzioni e rilasci negli ambienti di sviluppo, staging e produzione.
  • Coordinare le priorità tra i progetti, lavorare in autonomia e rispettare le scadenze.

Requisiti

  • Oltre otto anni di esperienza nell’ingegneria dei dati.
  • Esperienza comprovata nell’ingegneria dei dati e nello sviluppo ETL.
  • Solida esperienza pratica con Azure Databricks e Azure Data Factory (ADF).
  • Competenze avanzate nello sviluppo ETL/ELT e nella trasformazione dei dati.
  • Conoscenza avanzata di SQL, inclusa la scrittura, l’ottimizzazione e la messa a punto di query complesse.
  • Esperienza con Python e PySpark.
  • Esperienza con Azure Data Lake e l’integrazione di dati aziendali.
  • Esperienza nell’analisi, convalida e profilazione dei dati e nel controllo qualità.
  • Esperienza nel supporto, monitoraggio e risoluzione dei problemi delle pipeline di produzione.
  • Capacità di lavorare in autonomia, mantenersi organizzati e gestire le priorità.
  • Ottime capacità di comunicazione scritta e orale.
  • Conoscenza avanzata dell’inglese.
  • Preferibile: esperienza con pipeline CI/CD e pratiche DevOps.
  • Preferibile: familiarità con Git, Azure DevOps o strumenti equivalenti per il controllo delle versioni e la distribuzione.
  • Preferibile: familiarità con strumenti cloud di monitoraggio, logging e osservabilità.

Benefit

  • Contratto di lavoro secondo il regime CLT.
  • Lavoro interamente da remoto.

Offerte correlate

Hitss Brasil

Architetto cloud di livello intermedio – Kubernetes e OpenShift

Hitss Brasil
5001 – 10.000 Dipendenti
ConsulenzaLogisticaMarketing

Supporta gli ambienti cloud e container di Hitss Brasil, con particolare attenzione a Kubernetes e Red Hat OpenShift. Definisce gli standard architetturali delle piattaforme e automatizza la configurazione con Ansible per favorire operazioni affidabili.

Apri