Sigma Software Group
Sigma Software Group
Sigma Software Group es una empresa multinacional de consultoría tecnológica fundada en 2002. Sus equipos ofrecen servicios de desarrollo de software, diseño gráfico, pruebas y soporte técnico a clientes de sectores como la automoción, la salud, las telecomunicaciones, la aviación, la banca, los videojuegos, el sector inmobiliario y la publicidad. La empresa contrata especialistas en TI para trabajar en proyectos complejos de ingeniería y apoya el desarrollo profesional mediante mentoría y aprendizaje continuo. El trabajo remoto forma parte de su modelo laboral, con proyectos para organizaciones como AstraZeneca, Scania y SAS.

Ingeniero sénior de datos, migración a Databricks

Migra la analítica de una gran empresa minorista de BigQuery a Databricks Lakehouse, creando canalizaciones PySpark escalables, arquitectura medallón y plataformas de datos en la nube con gobernanza.

Descripción

  • Ayuda a migrar una plataforma de analítica a gran escala de BigQuery a Databricks.
  • Diseña y crea arquitecturas Lakehouse escalables con Databricks y Delta Lake.
  • Evalúa las cargas de trabajo ETL y ELT existentes y define enfoques de migración.
  • Crea y optimiza canalizaciones para grandes volúmenes de datos minoristas y analíticos.
  • Implementa estrategias de procesamiento incremental y marcos de transformación escalables.
  • Desarrolla y mantiene soluciones de procesamiento de datos con Spark y PySpark.
  • Diseña y mantiene las capas medallón Bronze, Silver y Gold.
  • Aplica prácticas de gobernanza y seguridad de datos mediante Unity Catalog.
  • Colabora con los equipos de Ciencia de Datos, Analítica, Producto e Ingeniería de Clientes.
  • Participa en debates sobre arquitectura y en el diseño de soluciones técnicas.
  • Crea componentes reutilizables para la plataforma de datos y estándares de ingeniería.
  • Revisa código y mejora la fiabilidad y mantenibilidad de la plataforma.
  • Resuelve problemas y optimiza cargas de trabajo complejas de SQL y Spark.
  • Apoya los despliegues en producción y la modernización de la plataforma.

Requisitos

  • Aporta al menos cinco años de experiencia profesional como ingeniero/a de datos.
  • Domina Python y tiene un nivel avanzado de SQL.
  • Cuenta con experiencia práctica y comercial con Databricks.
  • Tiene sólidos conocimientos de Apache Spark, especialmente PySpark.
  • Tiene experiencia en el diseño y la creación de plataformas de datos modernas en la nube.
  • Tiene experiencia en el desarrollo de canalizaciones ETL y ELT y soluciones de procesamiento de datos a gran escala.
  • Cuenta con experiencia práctica con Delta Lake.
  • Tiene experiencia con Spark Declarative Pipelines.
  • Tiene experiencia en la supervisión de clústeres, el análisis de métricas y la optimización del rendimiento.
  • Comprende las arquitecturas de procesamiento de datos distribuidos.
  • Comprende los conceptos de almacenamiento de datos y el modelado dimensional.
  • Tiene experiencia con Airflow o una herramienta de orquestación comparable.
  • Tiene experiencia en la optimización de cargas analíticas complejas de SQL.
  • Tiene experiencia aplicando prácticas de CI/CD a plataformas de ingeniería de datos.
  • Tiene habilidad para resolver problemas y optimizar el rendimiento.
  • Trabaja eficazmente con equipos internacionales y multidisciplinares.
  • Tiene un nivel de inglés intermedio alto o superior.

Beneficios

  • El trabajo remoto está disponible para los empleados.
  • Oportunidades de aprendizaje continuo.
  • Oportunidades de crecimiento con la tecnología.
  • Impacto significativo a través del trabajo de ingeniería.
  • Trabajo en proyectos internacionales complejos.

Empleos relacionados

Intetics

Ingeniero/a de datos de ML, remoto desde Rumanía

Intetics

Crea infraestructura de datos en tiempo real, de grafos y de series temporales para el rendimiento deportivo. Da soporte a la evaluación de aprendizaje automático y a sistemas de IA para un cliente de Intetics en Estados Unidos.

Abrir
AllCloud

Ingeniero de datos con hebreo

AllCloud

Desarrolla plataformas lakehouse en AWS, pipelines de datos y soluciones de IA para los clientes de consultoría en la nube de AllCloud. Diseña arquitecturas escalables y ayuda a los clientes a modernizar sus sistemas de datos.

Abrir