RELX vyvíjí analytická řešení a nástroje pro rozhodování založené na informacích pro profesionální a firemní zákazníky po celém světě. Jeho produkty kombinují specializovaný obsah, data a technologie a podporují lepší rozhodování a kvalitnější výsledky v oblastech řízení rizik, vědeckých, technických a lékařských informací, práva a výstavnictví. RELX působí také na trzích poradenství, zdravotnictví a pojišťovnictví, kde organizacím pomáhá zvyšovat produktivitu, řídit rizika, rozvíjet výzkum, podporovat právní práci a efektivněji uskutečňovat obchodní transakce.
Senior softwarový inženýr, datové inženýrství — RELX, práce z kanceláře v Chennai
Budujte datové pipeline Azure a HPCC pro LexisNexis Risk Solutions. Vyvíjejte škálovatelné platformy podporující analýzu rizik, reporting a provozní datové potřeby.
Popis
- Vytvářet a udržovat škálovatelné ETL a ELT pipeline pomocí Azure Data Factory, Databricks a úložných služeb Azure
- Načítat data z relačních databází, rozhraní API a souborových zdrojů do datových platforem Azure
- Transformovat data na HPCC pomocí ECL a v Azure pomocí Spark SQL a PySpark prostřednictvím Azure Databricks
- Vyvíjet, udržovat a zlepšovat notebooky a úlohy Azure Databricks
- Vytvářet efektivní úlohy Spark pro zpracování velkých datových sad
- Vytvářet datové modely na HPCC pomocí ECL a v Delta Lake, Parquet a dalších sloupcových formátech
- Ladit úlohy ECL, SQL a Spark pro vyšší výkon a škálovatelnost
- Spolupracovat s business analytiky, datovými vědci a týmy aplikačního vývoje na upřesňování datových potřeb a rozvoji inženýrských postupů
- Vyvíjet a zdokonalovat spolehlivé, škálovatelné a bezpečné podnikové datové platformy a pipeline
- Poskytovat datová řešení pro analytiku, reporting a provozní případy použití
Požadavky
- Prokazatelné znalosti SQL a logiky transformace dat
- Praktická znalost principů datových skladů a vzorů ETL/ELT
- Praktické zkušenosti s Azure Databricks, Spark SQL a PySpark
- Zkušenosti s Azure Data Factory, Azure Data Lake Storage Gen2 a Azure SQL nebo Synapse
- Zkušenosti s velkými strukturovanými a částečně strukturovanými datovými sadami
- Znalost agilních postupů vývoje
- Konstruktivní přístup a ochota učit se nové nástroje a postupy
- Porozumění životnímu cyklu vývoje softwaru od požadavků a návrhu přes implementaci, testování a nasazení až po údržbu
- Znalost principů softwarového inženýrství, návrhových vzorů a osvědčených postupů vývoje
- Schopnost shromažďovat, upřesňovat a dokumentovat požadavky
- Silné písemné a ústní komunikační dovednosti
- Dobré analytické schopnosti a schopnost řešit problémy
- Znalost pojmů z oblasti pojišťovnictví
Benefity
- Benefity se liší podle země zaměstnance
- Podpora s ubytováním nebo úpravami během náborového procesu