EXL
EXL
EXL es una empresa de consultoría y servicios empresariales que ayuda a las organizaciones a utilizar datos, análisis y tecnología para mejorar sus operaciones y tomar mejores decisiones. Su trabajo incluye la gestión de operaciones, el análisis para la toma de decisiones y la transformación digital, con experiencia en sectores como la atención sanitaria, los seguros, las finanzas y la logística. EXL combina la ciencia de datos con una sólida experiencia empresarial para desarrollar soluciones adaptadas a los objetivos, el modelo operativo y el contexto sectorial de cada organización.

Líder técnico de Databricks en EXL — Chennai, híbrido

Lidera la ingeniería lakehouse de Databricks para plataformas contra los delitos financieros. Desarrolla pipelines de Delta Lake y gestiona Unity Catalog en entornos de desarrollo, pruebas y producción.

Descripción

  • Crear y mantener espacios de trabajo, clústeres y grupos de cómputo de Databricks en entornos de desarrollo, pruebas y producción.
  • Configurar la gobernanza de Unity Catalog, los controles de acceso, los permisos detallados y el linaje de datos.
  • Ajustar los tipos de clúster, el escalado automático y los nodos spot o interrumpibles para equilibrar costes y rendimiento.
  • Establecer estructuras de espacios de trabajo, controles de acceso y gestión de secretos con Databricks Secrets, Azure Key Vault o AWS Secrets Manager.
  • Gestionar trabajos, flujos de trabajo y orquestación de varias tareas de Databricks, incluidas sus dependencias.
  • Diseñar tablas de Delta Lake con particionado y ordenación Z, y compactar archivos con OPTIMIZE y VACUUM.
  • Organizar lagos de datos estructurados en capas Bronze, Silver y Gold mediante la arquitectura Medallion.
  • Desarrollar pipelines de Delta Live Tables con ETL/ELT declarativo y expectativas de calidad de datos integradas.
  • Gestionar cambios de esquema, versiones de tablas, viajes en el tiempo y Change Data Feed para el procesamiento incremental.
  • Crear patrones lakehouse que conecten Delta Lake con Kafka, ADLS, S3 y GCS.
  • Crear pipelines de Databricks para plataformas contra los delitos financieros que abarquen AML, KYC, CRA, detección de sanciones, supervisión de transacciones, detección de fraude e informes regulatorios.

Requisitos

  • Título de grado o máster en informática, tecnologías de la información, ingeniería de datos o una disciplina relacionada.
  • Al menos 8 años de experiencia en ingeniería de datos o ingeniería de software.
  • Al menos 3 años de experiencia práctica con Databricks en producción.
  • Sólidos conocimientos de ingeniería de macrodatos, plataformas de datos en la nube e informática distribuida.
  • Amplia experiencia con Databricks Workspaces, Clusters, Jobs, Workflows y Repos.
  • Dominio de Unity Catalog, incluida la configuración del metastore, la gestión de catálogos, esquemas y tablas, los controles de acceso y el linaje de datos.
  • Experiencia práctica desarrollando y supervisando pipelines de Delta Live Tables, así como definiendo sus expectativas.
  • Sólido conocimiento del funcionamiento interno de Delta Lake, incluidos su registro de transacciones, garantías ACID, disposición de archivos y métodos de optimización.
  • Experiencia con Databricks SQL Warehouses, SQL Analytics y desarrollo de paneles.
  • Conocimientos del motor Databricks Photon, la computación sin servidor y la optimización de costes.

Empleos relacionados

Neuron

Ingeniero/a sénior de frontend, Angular

Neuron

Lidera la arquitectura frontend y crea experiencias Angular para web y móvil en la plataforma de resolución de servicios con IA de Neuron. Responsabilízate de los componentes de interfaz reutilizables, las integraciones, el rendimiento y la mentoría de ingenieros.

Abrir
Weekday

Gerente sénior de ingeniería Java full stack

Weekday

Lidera equipos de ingeniería que desarrollan servicios escalables con Java y Spring Boot, junto con aplicaciones frontend modernas. Orienta la arquitectura, la fiabilidad, la mentoría y la entrega para un cliente de desarrollo de software.

Abrir
AtkinsRéalis

Ingeniero/a jefe de EICA para agua y aguas residuales

AtkinsRéalis

Lidera el diseño de ingeniería eléctrica para plantas de tratamiento de agua y aguas residuales y estaciones de bombeo en AtkinsRéalis. Guía la ejecución multidisciplinar de proyectos, el cumplimiento de normas, las revisiones de diseño y el desarrollo de equipos de ingeniería eléctrica.

Abrir
Nokia

Ingeniero sénior de software, plataformas nativas de la nube

Nokia

Desarrolla MantaRay NM de Nokia, una plataforma nativa de la nube para la observabilidad de redes, trabajando con sistemas distribuidos, Kubernetes y automatización de CI/CD. Aplica herramientas de ingeniería asistida por IA y automatización para mejorar el desarrollo de software.

Abrir