RELX vyvíja informačné analytické nástroje a nástroje na podporu rozhodovania pre profesionálnych a firemných zákazníkov na celom svete. Jeho produkty kombinujú špecializovaný obsah, údaje a technológie s cieľom podporiť lepšie rozhodnutia a dosiahnuť lepšie výsledky v oblastiach rizík, vedy, techniky a medicíny, práva a výstavníctva. RELX pôsobí aj v oblasti poradenstva, zdravotníctva a trhov súvisiacich s poisťovníctvom, pričom organizáciám pomáha zvyšovať produktivitu, riadiť riziká, napredovať vo výskume, podporovať právnu prácu a efektívnejšie realizovať obchodné transakcie.
Softvérový inžinier III, dátové inžinierstvo - RELX, Chennai na pracovisku
Budujte dátové pipeline v Azure a HPCC pre LexisNexis Risk Solutions. Vyvíjajte škálovateľné platformy pre analýzu rizík, reportovanie a prevádzkové dátové potreby.
Popis
- Vytvárajte a udržiavajte škálovateľné ETL a ELT pipeline pomocou Azure Data Factory, Databricks a úložiskových služieb Azure
- Načítavajte údaje z relačných databáz, API a súborových zdrojov do dátových platforiem Azure
- Transformujte údaje na HPCC pomocou ECL a v Azure pomocou Spark SQL a PySpark prostredníctvom Azure Databricks
- Vyvíjajte, udržiavajte a zlepšujte notebooky a úlohy v Azure Databricks
- Vytvárajte efektívne úlohy Spark na spracovanie veľkých dátových súborov
- Vytvárajte dátové modely na HPCC pomocou ECL a v Delta Lake, Parquet a ďalších stĺpcových formátoch
- Optimalizujte úlohy ECL, SQL a Spark s cieľom zvýšiť výkon a škálovateľnosť
- Spolupracujte s business analytikmi, dátovými vedcami a aplikačnými tímami na objasňovaní dátových potrieb a zlepšovaní inžinierskych postupov
- Vyvíjajte a zdokonaľujte spoľahlivé, škálovateľné a bezpečné podnikové dátové platformy a pipeline
- Poskytujte dátové riešenia pre analytiku, reportovanie a prevádzkové prípady použitia
Požiadavky
- Preukázateľne dobrá znalosť SQL a logiky transformácie údajov
- Pracovná znalosť princípov dátových skladov a vzorov ETL/ELT
- Praktické skúsenosti s Azure Databricks, Spark SQL a PySpark
- Skúsenosti s Azure Data Factory, Azure Data Lake Storage Gen2 a Azure SQL alebo Synapse
- Skúsenosti so spracovaním veľkých štruktúrovaných a pološtruktúrovaných dátových súborov
- Znalosť agilných vývojových postupov
- Konstruktívne zmýšľanie a ochota učiť sa nové nástroje a procesy
- Pochopenie životného cyklu vývoja softvéru od požiadaviek a návrhu cez implementáciu, testovanie, nasadenie a údržbu
- Znalosť princípov softvérového inžinierstva, návrhových vzorov a osvedčených vývojových postupov
- Schopnosť zhromažďovať, objasňovať a dokumentovať požiadavky
- Vynikajúce písomné a ústne komunikačné schopnosti
- Efektívne analytické schopnosti a schopnosť riešiť problémy
- Znalosť poistnej terminológie
Benefity
- Benefity sa líšia podľa krajiny zamestnanca
- Podpora pri zabezpečení ubytovania alebo úprav počas náborového procesu