Sigma Software Group
Sigma Software Group
Sigma Software Group es una empresa multinacional de consultoría tecnológica fundada en 2002. Sus equipos ofrecen servicios de desarrollo de software, diseño gráfico, pruebas y soporte técnico a clientes de sectores como la automoción, la salud, las telecomunicaciones, la aviación, la banca, los videojuegos, el sector inmobiliario y la publicidad. La empresa contrata especialistas en TI para trabajar en proyectos complejos de ingeniería y apoya el desarrollo profesional mediante mentoría y aprendizaje continuo. El trabajo remoto forma parte de su modelo laboral, con proyectos para organizaciones como AstraZeneca, Scania y SAS.

Ingeniero/a sénior de datos, migración a Databricks

Migra una plataforma de analítica minorista a gran escala de BigQuery a Databricks, creando arquitecturas Lakehouse y canalizaciones de Spark. Desarrolla soluciones de datos gobernadas en Sigma Software Group.

Descripción

  • Ayuda a migrar una plataforma de analítica a gran escala de BigQuery a Databricks.
  • Diseña y crea arquitecturas Lakehouse escalables con Databricks y Delta Lake.
  • Evalúa las cargas de trabajo ETL y ELT existentes y define planes de migración.
  • Desarrolla y optimiza canalizaciones para grandes volúmenes de datos minoristas y analíticos.
  • Crea estrategias de procesamiento incremental y marcos de transformación escalables.
  • Desarrolla y mantiene soluciones de procesamiento de datos con Spark y PySpark.
  • Diseña y mantiene las capas Bronze, Silver y Gold de la arquitectura medallón.
  • Aplica prácticas de gobierno y seguridad de datos con Unity Catalog.
  • Colabora con los equipos de Ciencia de Datos, Analítica, Producto e Ingeniería de Clientes.
  • Contribuye a los debates sobre arquitectura y al diseño de soluciones técnicas.
  • Crea componentes reutilizables para la plataforma de datos y estándares de ingeniería.
  • Revisa código y mejora la fiabilidad y facilidad de mantenimiento de la plataforma.
  • Diagnostica y optimiza cargas de trabajo complejas de SQL y Spark.
  • Da soporte a las puestas en producción y a la modernización de la plataforma.

Requisitos

  • Al menos cinco años de experiencia profesional en ingeniería de datos.
  • Sólidas habilidades en Python y dominio avanzado de SQL.
  • Experiencia práctica y comercial con Databricks.
  • Sólidos conocimientos de Apache Spark, especialmente PySpark.
  • Experiencia en el diseño y la creación de plataformas de datos modernas en la nube.
  • Experiencia desarrollando canalizaciones ETL o ELT y soluciones de procesamiento de datos a gran escala.
  • Experiencia práctica con Delta Lake.
  • Experiencia con Spark Declarative Pipelines.
  • Experiencia en la supervisión de clústeres, el análisis de métricas y la optimización del rendimiento.
  • Sólido conocimiento de arquitecturas de procesamiento de datos distribuidos.
  • Conocimientos sólidos de almacenamiento de datos y modelado dimensional.
  • Experiencia con Airflow o una herramienta de orquestación similar.
  • Experiencia optimizando cargas de trabajo analíticas complejas en SQL.
  • Experiencia implementando prácticas de CI/CD para plataformas de ingeniería de datos.
  • Sólidas habilidades de resolución de problemas y optimización del rendimiento.
  • Capacidad para colaborar con equipos multifuncionales en entornos internacionales.
  • Nivel de inglés intermedio alto o superior.

Beneficios

  • Oportunidades continuas de aprendizaje.
  • Oportunidades para ampliar tus conocimientos tecnológicos.
  • Impacto significativo mediante el trabajo de ingeniería.
  • Trabajo en proyectos internacionales complejos.

Empleos relacionados

Correlation One

Diseñador/a de aprendizaje, formación en datos e IA

Correlation One
51 – 200 Empleados
Patrocinador de visa H1B

Diseña formación en datos e IA basada en evidencia para los programas de desarrollo profesional de Correlation One. Crea planes de estudio, ejercicios y recursos de aprendizaje reutilizables para clientes empresariales.

Abrir