EXL
EXL
EXL er en virksomhed inden for forretningsrådgivning og -tjenester, der hjælper organisationer med at bruge data, analyser og teknologi til at forbedre driften og træffe bedre beslutninger. Arbejdet omfatter driftsstyring, beslutningsanalyse og digital transformation, og virksomheden har erfaring med at støtte kunder inden for sundhedsvæsen, forsikring, finans og logistik. EXL kombinerer datavidenskab med praktisk forretningsekspertise for at udvikle løsninger, der er tilpasset den enkelte organisations mål, driftsmodel og branchekontekst.

Databricks-teknikleder hos EXL – Chennai, hybrid

Led Databricks lakehouse-udvikling for platforme til bekæmpelse af økonomisk kriminalitet. Byg Delta Lake-pipelines, og administrer Unity Catalog på tværs af udvikling, test og produktion.

Beskrivelse

  • Byg og vedligehold Databricks-arbejdsområder, klynger og beregningspuljer på tværs af udvikling, test og produktion.
  • Opsæt governance i Unity Catalog, adgangskontroller, detaljerede tilladelser og dataafstamning.
  • Finjuster klyngetyper, automatisk skalering og spot- eller afbrydelige noder for at afveje omkostninger og ydeevne.
  • Etabler arbejdsområdestrukturer og adgangskontroller, og administrer hemmeligheder med Databricks Secrets, Azure Key Vault eller AWS Secrets Manager.
  • Administrer Databricks-jobs, workflows og orkestrering af flere opgaver, herunder afhængigheder.
  • Design Delta Lake-tabeller med partitionering og Z-ordering, og komprimer filer med OPTIMIZE og VACUUM.
  • Organiser strukturerede datasøer i Bronze-, Silver- og Gold-lag ved hjælp af Medallion-arkitekturen.
  • Udvikl Delta Live Tables-pipelines med deklarativ ETL/ELT og indbyggede forventninger til datakvalitet.
  • Håndter skemaændringer, tabelversioner, tidsrejser og Change Data Feed til inkrementel behandling.
  • Skab lakehouse-mønstre, der forbinder Delta Lake med Kafka, ADLS, S3 og GCS.
  • Byg Databricks-pipelines til platforme for økonomisk kriminalitet, der dækker AML, KYC, CRA, sanktionsscreening, transaktionsovervågning, svindelopdagelse og regulatorisk rapportering.

Krav

  • Bachelor- eller kandidatgrad i datalogi, informationsteknologi, data engineering eller et beslægtet fagområde.
  • Mindst 8 års erfaring med data engineering eller software engineering.
  • Mindst 3 års praktisk Databricks-erfaring i produktion.
  • Stærkt fundament inden for big data engineering, cloudbaserede dataplatforme og distribueret databehandling.
  • Indgående erfaring med Databricks Workspaces, Clusters, Jobs, Workflows og Repos.
  • Gode færdigheder i Unity Catalog, herunder opsætning af metastore, administration af kataloger, skemaer og tabeller, adgangskontroller og dataafstamning.
  • Praktisk erfaring med at udvikle og overvåge Delta Live Tables-pipelines og fastsætte forventninger til dem.
  • Stærk forståelse af Delta Lakes indre funktioner, herunder transaktionsloggen, ACID-garantier, fillayout og optimeringsmetoder.
  • Erfaring med Databricks SQL Warehouses, SQL Analytics og udvikling af dashboards.
  • Kendskab til Databricks Photon-motoren, serverløs databehandling og omkostningsoptimering.

Relaterede job

Weekday

Senior engineeringchef for fullstackudvikling i Java

Weekday
501 – 1.000 Medarbejdere
DetailhandelE-handelMode

Led ingeniørteams, der bygger skalerbare Java- og Spring Boot-tjenester med moderne frontendapplikationer. Vejled om arkitektur, pålidelighed, mentoring og levering for en kunde inden for softwareudvikling.

Åbn
Nokia

Senior softwareingeniør, cloud-native platforme

Nokia

Byg Nokias cloud-native-netværksobservabilitetsplatform MantaRay NM, og arbejd med distribuerede systemer, Kubernetes og CI/CD-automatisering. Brug AI-assisterede udviklingsværktøjer og automatisering til at forbedre softwareudviklingen.

Åbn
Nokia

Senior softwareingeniør, cloud-native platforme

Nokia

Byg Nokias MantaRay-platform til netværksstyring for teleudbydere. Led arbejdet med cloud-native distribuerede systemer, Kubernetes, CI/CD-automatisering og AI-assisteret udvikling.

Åbn