EXL
EXL
EXL je tvrtka za poslovno savjetovanje i usluge koja organizacijama pomaže u korištenju podataka, analitike i tehnologije za unapređenje poslovanja i donošenje boljih odluka. Njezino djelovanje obuhvaća upravljanje poslovanjem, analitiku za donošenje odluka i digitalnu transformaciju, uz iskustvo u pružanju podrške klijentima u zdravstvu, osiguranju, financijama i logistici. EXL spaja znanost o podacima s praktičnim poslovnim stručnim znanjem kako bi razvila rješenja prilagođena ciljevima, operativnom modelu i kontekstu industrije svake organizacije.

Tehnički voditelj za Databricks u EXL-u — Chennai, hibridno

Vodite lakehouse inženjerstvo na platformama za financijski kriminal u Databricksu. Izrađujte podatkovne cjevovode Delta Lake i upravljajte Unity Catalogom u razvojnim, testnim i produkcijskim okruženjima.

Opis

  • Izrađujte i održavajte radne prostore Databricks, klastere i računalne skupove u razvojnim, testnim i produkcijskim okruženjima.
  • Postavljajte upravljanje Unity Catalogom, kontrole pristupa, detaljna dopuštenja i praćenje podrijetla podataka.
  • Podešavajte vrste klastera, automatsko skaliranje te spot ili preemptivne čvorove kako biste uskladili troškove i performanse.
  • Uspostavljajte strukturu radnih prostora, kontrole pristupa i upravljanje tajnama pomoću alata Databricks Secrets, Azure Key Vault ili AWS Secrets Manager.
  • Upravljajte poslovima i tijekovima rada u Databricksu te orkestracijom više zadataka, uključujući ovisnosti.
  • Dizajnirajte tablice Delta Lakea s particioniranjem i Z-orderingom te sažimajte datoteke pomoću OPTIMIZE i VACUUM.
  • Organizirajte strukturirana podatkovna jezera u slojeve Bronze, Silver i Gold primjenom Medallion arhitekture.
  • Razvijajte cjevovode Delta Live Tables s deklarativnim ETL/ELT-om i ugrađenim očekivanjima kvalitete podataka.
  • Upravljajte promjenama sheme, verzijama tablica, funkcijom time travel i Change Data Feedom za inkrementalnu obradu.
  • Izrađujte lakehouse obrasce koji povezuju Delta Lake s alatima Kafka, ADLS, S3 i GCS.
  • Izrađujte Databricksove cjevovode za platforme za financijski kriminal koje obuhvaćaju AML, KYC, CRA, provjeru sankcija, praćenje transakcija, otkrivanje prijevara i regulatorno izvještavanje.

Zahtjevi

  • Prvostupanjska ili diplomska diploma iz računarstva, informacijskih tehnologija, podatkovnog inženjerstva ili srodnog područja.
  • Najmanje 8 godina iskustva u podatkovnom ili softverskom inženjerstvu.
  • Najmanje 3 godine praktičnog iskustva s Databricksom u produkciji.
  • Čvrsto poznavanje inženjerstva velikih podataka, platformi za podatke u oblaku i distribuiranog računarstva.
  • Opsežno iskustvo s Databricks Workspaces, Clusters, Jobs, Workflows i Repos.
  • Dobro poznavanje Unity Cataloga, uključujući postavljanje metastorea, upravljanje katalozima, shemama i tablicama, kontrole pristupa i praćenje podrijetla podataka.
  • Praktično iskustvo u razvoju i nadzoru cjevovoda Delta Live Tables te definiranju očekivanja za njih.
  • Dobro razumijevanje unutarnjeg funkcioniranja Delta Lakea, uključujući transakcijski zapisnik, ACID jamstva, raspored datoteka i metode optimizacije.
  • Iskustvo s Databricks SQL Warehouses, SQL Analytics i razvojem nadzornih ploča.
  • Poznavanje mehanizma Databricks Photon, poslužiteljskog računarstva i optimizacije troškova.

Povezani poslovi

Neuron

Senior Frontend Engineer, Angular

Neuron

Vodi frontend arhitekturu i izrađuje Angular rješenja za web i mobilne uređaje na Neuronovoj platformi za rješavanje zahtjeva uz pomoć umjetne inteligencije. Brine o ponovno upotrebljivim komponentama, integracijama i performansama te mentorira inženjere.

Otvori
Weekday

Viši menadžer full-stack razvoja u Javi

Weekday
501 – 1.000 Zaposlenici
E-trgovinaMaloprodajaModa

Vodite inženjerske timove koji razvijaju skalabilne servise u Javi i Spring Bootu te moderne frontend aplikacije. Usmjeravajte arhitekturu, pouzdanost, mentorstvo i isporuku za klijenta iz područja razvoja softvera.

Otvori
Nokia

Viši softverski inženjer za cloud-native platforme

Nokia

Razvijajte Nokijinu cloud-native platformu za mrežnu observabilnost MantaRay NM, radeći s distribuiranim sustavima, Kubernetesom i CI/CD automatizacijom. Primjenjujte alate za razvoj uz pomoć umjetne inteligencije i automatizaciju kako biste unaprijedili razvoj softvera.

Otvori