RELX desarrolla análisis y herramientas de toma de decisiones basados en información para clientes profesionales y empresariales de todo el mundo. Sus productos combinan contenido especializado, datos y tecnología para respaldar mejores decisiones y resultados más sólidos en los sectores de Riesgo, Científico, Técnico y Médico, Legal y Exposiciones. RELX también opera en los mercados de consultoría, atención sanitaria y seguros, ayudando a las organizaciones a mejorar la productividad, gestionar riesgos, impulsar la investigación, respaldar el trabajo jurídico y realizar transacciones comerciales más eficaces.
Ingeniero de Software III, Ingeniería de Datos - RELX, Chennai presencial
Crea canalizaciones de datos en Azure y HPCC para LexisNexis Risk Solutions. Desarrolla plataformas escalables que respalden el análisis de riesgos, los informes y las necesidades de datos operativos.
Descripción
- Crear y mantener canalizaciones ETL y ELT escalables con Azure Data Factory, Databricks y servicios de almacenamiento de Azure
- Cargar datos de bases de datos relacionales, API y fuentes basadas en archivos en plataformas de datos de Azure
- Transformar datos en HPCC con ECL y en Azure con Spark SQL y PySpark mediante Azure Databricks
- Desarrollar, mantener y mejorar notebooks y trabajos de Azure Databricks
- Crear cargas de trabajo eficientes de Spark para procesar grandes conjuntos de datos
- Crear modelos de datos en HPCC con ECL y en Delta Lake, Parquet y otros formatos columnares
- Optimizar las cargas de trabajo de ECL, SQL y Spark para mejorar el rendimiento y la escalabilidad
- Colaborar con analistas de negocio, científicos de datos y equipos de aplicaciones para aclarar las necesidades de datos y avanzar en las prácticas de ingeniería
- Desarrollar y perfeccionar plataformas y canalizaciones de datos empresariales fiables, escalables y seguras
- Proporcionar soluciones de datos para casos de uso analítico, de informes y operativo
Requisitos
- Solidez demostrada en SQL y lógica de transformación de datos
- Conocimientos prácticos de principios de almacenamiento de datos y patrones ETL/ELT
- Experiencia práctica con Azure Databricks, Spark SQL y PySpark
- Experiencia con Azure Data Factory, Azure Data Lake Storage Gen2 y Azure SQL o Synapse
- Experiencia en el tratamiento de grandes conjuntos de datos estructurados y semiestructurados
- Familiaridad con prácticas de desarrollo Agile
- Actitud constructiva y disposición para aprender nuevas herramientas y procesos
- Comprensión del ciclo de vida del desarrollo de software, desde los requisitos y el diseño hasta la implementación, las pruebas, la implementación en producción y el mantenimiento
- Conocimientos de principios de ingeniería de software, patrones de diseño y buenas prácticas de desarrollo
- Capacidad para recopilar, aclarar y documentar requisitos
- Sólidas habilidades de comunicación escrita y verbal
- Capacidad analítica y de resolución de problemas eficaz
- Familiaridad con la terminología de seguros
Beneficios
- Los beneficios varían según el país del empleado
- Apoyo con el alojamiento o las adaptaciones durante el proceso de contratación