RELX
RELX
RELX udvikler informationsbaserede analyse- og beslutningsværktøjer til professionelle og erhvervskunder verden over. Virksomhedens produkter kombinerer specialiseret indhold, data og teknologi for at understøtte bedre beslutninger og stærkere resultater inden for risikostyring, videnskab, teknik og medicin, jura samt udstillinger. RELX er også aktiv inden for rådgivning samt sundheds- og forsikringsrelaterede markeder, hvor virksomheden hjælper organisationer med at forbedre produktiviteten, håndtere risici, fremme forskning, understøtte juridisk arbejde og gennemføre mere effektive forretningstransaktioner.

Softwareingeniør III, data engineering - RELX, Chennai på arbejdsstedet

Byg datapipelines i Azure og HPCC for LexisNexis Risk Solutions. Udvikl skalerbare platforme, der understøtter risikoanalyse, rapportering og operationelle databehov.

Beskrivelse

  • Opret og vedligehold skalerbare ETL- og ELT-pipelines med Azure Data Factory, Databricks og Azure-lagringstjenester
  • Indlæs data fra relationsdatabaser, API'er og filbaserede kilder i Azure-dataplatforme
  • Transformér data på HPCC med ECL og i Azure med Spark SQL og PySpark via Azure Databricks
  • Udvikl, vedligehold og forbedr Azure Databricks-notebooks og jobs
  • Opbyg effektive Spark-arbejdsbelastninger til behandling af store datasæt
  • Opret datamodeller på HPCC med ECL og i Delta Lake, Parquet og andre kolonnebaserede formater
  • Optimer ECL-, SQL- og Spark-arbejdsbelastninger for bedre ydeevne og skalerbarhed
  • Samarbejd med forretningsanalytikere, data scientists og applikationsteams om at afklare databehov og styrke udviklingspraksis
  • Udvikl og forbedr pålidelige, skalerbare og sikre virksomhedsdataplatforme og datapipelines
  • Lever dataløsninger til analyse, rapportering og operationelle anvendelsesområder

Krav

  • Dokumenteret styrke inden for SQL og logik til datatransformation
  • Praktisk kendskab til principper for datavarehuse og ETL-/ELT-mønstre
  • Praktisk erfaring med Azure Databricks, Spark SQL og PySpark
  • Erfaring med Azure Data Factory, Azure Data Lake Storage Gen2 og Azure SQL eller Synapse
  • Erfaring med håndtering af store strukturerede og semistrukturerede datasæt
  • Kendskab til agile udviklingsmetoder
  • En konstruktiv indstilling og vilje til at lære nye værktøjer og processer
  • Forståelse af softwareudviklingens livscyklus, fra krav og design til implementering, test, udrulning og vedligeholdelse
  • Kendskab til softwareingeniørprincipper, designmønstre og bedste praksis for udvikling
  • Evne til at indsamle, afklare og dokumentere krav
  • Stærke skriftlige og mundtlige kommunikationsevner
  • Gode analytiske evner og problemløsningsevner
  • Kendskab til forsikringsterminologi

Fordele

  • Fordele varierer afhængigt af medarbejderens land
  • Støtte til indkvartering eller tilpasninger under ansættelsesprocessen

Relaterede job