EXL
EXL
EXL je poradenská společnost a poskytovatel podnikových služeb, který organizacím pomáhá využívat data, analytiku a technologie ke zlepšování provozu a přijímání lepších rozhodnutí. Její činnost zahrnuje řízení provozu, analytiku pro podporu rozhodování a digitální transformaci, přičemž zkušenosti má s podporou klientů ve zdravotnictví, pojišťovnictví, finančnictví a logistice. EXL propojuje datovou vědu s praktickými znalostmi podnikání a vytváří řešení přizpůsobená cílům, provoznímu modelu a oborovému kontextu každé organizace.

Technický vedoucí Databricks ve společnosti EXL — Čennaí, hybridní režim

Veďte vývoj lakehouse řešení Databricks pro platformy zaměřené na finanční kriminalitu. Vytvářejte pipeline Delta Lake a spravujte Unity Catalog ve vývojovém, testovacím a produkčním prostředí.

Popis

  • Vytvářejte a udržujte pracovní prostory Databricks, clustery a výpočetní pooly ve vývojovém, testovacím a produkčním prostředí.
  • Nastavujte správu dat v Unity Catalog, řízení přístupu, podrobná oprávnění a datovou provenienci.
  • Laďte typy clusterů, automatické škálování a spot či předemptivní uzly tak, abyste vyvážili náklady a výkon.
  • Zavádějte strukturu pracovních prostorů a řízení přístupu a spravujte tajné údaje pomocí Databricks Secrets, Azure Key Vault nebo AWS Secrets Manager.
  • Spravujte úlohy a pracovní postupy Databricks i orchestrace více úloh včetně jejich závislostí.
  • Navrhujte tabulky Delta Lake s dělením a Z-orderingem a zhutňujte soubory pomocí OPTIMIZE a VACUUM.
  • Uspořádávejte strukturovaná datová jezera do vrstev Bronze, Silver a Gold podle architektury Medallion.
  • Vyvíjejte pipeline Delta Live Tables s deklarativním ETL/ELT a vestavěnými očekáváními kvality dat.
  • Zpracovávejte změny schémat, verze tabulek, cestování časem a Change Data Feed pro přírůstkové zpracování.
  • Vytvářejte vzory lakehouse propojující Delta Lake s Kafka, ADLS, S3 a GCS.
  • Vytvářejte pipeline Databricks pro platformy zaměřené na finanční kriminalitu, zahrnující AML, KYC, CRA, kontrolu sankčních seznamů, monitorování transakcí, detekci podvodů a regulatorní výkaznictví.

Požadavky

  • Bakalářský nebo magisterský titul v oboru informatiky, informačních technologií, datového inženýrství nebo příbuzném oboru.
  • Nejméně 8 let zkušeností v datovém nebo softwarovém inženýrství.
  • Nejméně 3 roky praktických zkušeností s Databricks v produkčním prostředí.
  • Dobrá znalost inženýrství velkých dat, cloudových datových platforem a distribuovaných výpočtů.
  • Podrobné zkušenosti s Databricks Workspaces, Clusters, Jobs, Workflows a Repos.
  • Znalost Unity Catalog včetně nastavení metastore, správy katalogů, schémat a tabulek, řízení přístupu a datové provenience.
  • Praktické zkušenosti s vývojem a monitorováním pipeline Delta Live Tables a nastavováním očekávání kvality dat.
  • Důkladné porozumění vnitřnímu fungování Delta Lake včetně transakčního protokolu, záruk ACID, rozvržení souborů a optimalizačních metod.
  • Zkušenosti s Databricks SQL Warehouses, SQL Analytics a vývojem dashboardů.
  • Znalost enginu Databricks Photon, bezserverových výpočtů a optimalizace nákladů.

Související pracovní nabídky

Neuron

Seniorní frontendový inženýr, Angular

Neuron

Rozvíjejte architekturu frontendu a vytvářejte řešení v Angularu pro web a mobilní zařízení na platformě Neuron pro vyřizování požadavků pomocí AI. Zodpovídejte za opakovaně použitelné komponenty UI, integrace, výkon a mentoring inženýrů.

Otevřít
Weekday

Seniorní manažer Full-Stack Java vývoje

Weekday

Veďte inženýrské týmy, které vytvářejí škálovatelné služby v Javě a Spring Bootu i moderní frontendové aplikace. Zodpovídejte za architekturu, spolehlivost, mentoring a dodávky softwaru pro klienta.

Otevřít
Nokia

Seniorní softwarový inženýr, cloudové platformy

Nokia

Rozvíjejte cloudovou platformu pro observabilitu sítí MantaRay NM od společnosti Nokia a pracujte s distribuovanými systémy, Kubernetes a automatizací CI/CD. Využívejte nástroje pro vývoj s podporou AI a automatizaci ke zlepšování vývoje softwaru.

Otevřít