EXL
EXL
EXL je spoločnosť poskytujúca obchodné poradenstvo a služby, ktorá pomáha organizáciám využívať údaje, analytiku a technológie na zlepšovanie prevádzky a prijímanie lepších rozhodnutí. Jej činnosť zahŕňa riadenie prevádzky, rozhodovaciu analytiku a digitálnu transformáciu, pričom má skúsenosti s podporou klientov v oblasti zdravotníctva, poisťovníctva, financií a logistiky. EXL spája dátovú vedu s praktickými obchodnými skúsenosťami s cieľom vyvíjať riešenia prispôsobené cieľom, prevádzkovému modelu a odvetvovému kontextu každej organizácie.

Technický vedúci Databricks v EXL — Chennai, hybridne

Veďte vývoj lakehouse riešení v Databricks pre platformy zamerané na finančnú kriminalitu. Vytvárajte dátové pipeline v Delta Lake a spravujte Unity Catalog vo vývojovom, testovacom a produkčnom prostredí.

Popis

  • Vytvárajte a spravujte pracovné priestory Databricks, clustre a výpočtové fondy vo vývojovom, testovacom a produkčnom prostredí.
  • Nastavujte správu Unity Catalog, riadenie prístupu, podrobné oprávnenia a sledovanie pôvodu dát.
  • Ladte typy clusterov, automatické škálovanie a spot alebo preemptívne uzly tak, aby ste vyvážili náklady a výkon.
  • Zriaďujte štruktúru pracovných priestorov, riadenie prístupu a správu tajomstiev pomocou Databricks Secrets, Azure Key Vault alebo AWS Secrets Manager.
  • Spravujte úlohy a workflowy v Databricks aj orchestráciu viacerých úloh vrátane závislostí.
  • Navrhujte tabuľky Delta Lake s rozdelením na oddiely a Z-orderingom a optimalizujte súbory pomocou OPTIMIZE a VACUUM.
  • Organizujte štruktúrované dátové jazerá do vrstiev Bronze, Silver a Gold pomocou architektúry Medallion.
  • Vyvíjajte pipeline Delta Live Tables s deklaratívnym ETL/ELT a zabudovanými pravidlami kvality dát.
  • Spracúvajte zmeny schém, verzie tabuliek, time travel a Change Data Feed na inkrementálne spracovanie.
  • Vytvárajte vzory lakehouse, ktoré prepájajú Delta Lake s Kafka, ADLS, S3 a GCS.
  • Vytvárajte pipeline Databricks pre platformy zamerané na finančnú kriminalitu, ktoré pokrývajú AML, KYC, CRA, preverovanie sankčných zoznamov, monitorovanie transakcií, odhaľovanie podvodov a regulačné výkazníctvo.

Požiadavky

  • Bakalárske alebo magisterské vzdelanie v odbore informatika, informačné technológie, dátové inžinierstvo alebo príbuznom odbore.
  • Aspoň 8 rokov skúseností s dátovým alebo softvérovým inžinierstvom.
  • Aspoň 3 roky praktických skúseností s Databricks v produkčnom prostredí.
  • Pevné základy v oblasti inžinierstva veľkých dát, cloudových dátových platforiem a distribuovaných výpočtov.
  • Hlboké praktické skúsenosti s Databricks Workspaces, Clusters, Jobs, Workflows a Repos.
  • Dobrá znalosť Unity Catalog vrátane nastavenia metastoru, správy katalógov, schém a tabuliek, riadenia prístupu a sledovania pôvodu dát.
  • Praktické skúsenosti s vývojom, monitorovaním a nastavovaním očakávaní pre pipeline Delta Live Tables.
  • Dobrá znalosť interného fungovania Delta Lake vrátane transakčného protokolu, záruk ACID, rozloženia súborov a spôsobov optimalizácie.
  • Skúsenosti s Databricks SQL Warehouses, SQL Analytics a tvorbou dashboardov.
  • Znalosť enginu Databricks Photon, bezserverových výpočtov a optimalizácie nákladov.

Súvisiace pracovné ponuky

Neuron

Senior Frontend Engineer, Angular

Neuron

Vedie architektúru frontendu a tvorí Angular riešenia pre web a mobilné zariadenia na platforme Neuron na riešenie požiadaviek pomocou AI. Zodpovedá za znovupoužiteľné komponenty, integrácie a výkon a mentoruje vývojárov.

Otvoriť
Weekday

Senior manažér full-stack vývoja v Jave

Weekday

Veďte inžinierske tímy pri tvorbe škálovateľných služieb v Jave a Spring Boote a moderných frontendových aplikácií. Usmerňujte architektúru, spoľahlivosť, mentoring a dodávku softvéru pre klienta z oblasti vývoja softvéru.

Otvoriť
Nokia

Senior softvérový inžinier pre cloud-native platformy

Nokia

Budujte cloud-native platformu na pozorovateľnosť sietí MantaRay NM od spoločnosti Nokia a pracujte s distribuovanými systémami, Kubernetesom a automatizáciou CI/CD. Využívajte nástroje AI na podporu vývoja a automatizáciu na zefektívnenie tvorby softvéru.

Otvoriť
Nokia

Senior softvérový inžinier pre cloud-native platformy

Nokia

Budujte platformu MantaRay spoločnosti Nokia na správu sietí pre telekomunikačných poskytovateľov. Veďte distribuované cloud-native systémy, Kubernetes, automatizáciu CI/CD a vývoj s podporou umelej inteligencie.

Otvoriť