Allata
Allata
Allata er et globalt konsulenthus, der hjælper organisationer med at omsætte digital strategi til konkrete forbedringer af forretningen. Teamene arbejder med strategi, kundeoplevelse, cloud og teknologi, data samt kunstig intelligens og hjælper kunder med modernisering, personalisering og mere effektiv drift. Allata betjener blandt andet bilbranchen, sundhedssektoren, logistik, finansielle tjenester og hightech. Virksomheden trækker på erfaring fra tidligere IT-ledere og konsulenter til at vejlede komplekse digitale initiativer.

Databricks data platformschef (fjernarbejde, Texas)

Led arkitektur og levering af styrede Lakehouse-platforme og enterprise-datavarehuse for Allata. Vejled datapipelines, sikkerhed, skalerbarhed og udvikling af dataprodukter.

Beskrivelse

  • Fastlæg arkitektur, teknologivalg, referencemønstre og integrationsplaner for Lakehouse-platforme og enterprise-datavarehuse.
  • Skab konceptuelle, logiske og fysiske modeller for dataprodukter med flere lejere og branchespecifikke dataprodukter.
  • Standardisér datalag til indlæsning, rålagring, kuratering og levering.
  • Etablér styringspraksis for metadata, kataloger, dataoprindelse, datakontrakter og klassificering.
  • Definér sikkerheds- og compliancekontroller for adgang, maskering, kryptering, netværkssegmentering og revision.
  • Planlæg platformens skalerbarhed, høje tilgængelighed, katastrofeberedskab, kapacitet og omkostningsstyring.
  • Led valg og integration af Databricks, Delta Lake, Delta Live Tables, Fivetran, Azure Data Factory eller Data Fabric samt værktøjer til orkestrering og overvågning.
  • Fastlæg og håndhæv CI/CD-praksis for dataaktiver, herunder tests, automatiserede udgivelser og rollback-planer.
  • Definér metoder til batch- og streamingindlæsning, komprimering, partitionering og lagring.
  • Fastlæg standarder for observerbarhed af målinger, SLA'er, dashboards, logs, traces og alarmer.
  • Yd teknisk ledelse og mentorstøtte til datateknikteams.
  • Gennemgå arkitektur og kode for kritiske komponenter.
  • Samarbejd med Data Product Owners og interessenter inden for sikkerhed, infrastruktur, BI og ML om at omsætte krav til løsninger og køreplaner.
  • Byg, test og udrul behandlingsmoduler med Spark, PySpark eller Scala, Spark SQL og lagrede procedurer.
  • Udvikl og finjustér datapipelines på Databricks- og databaseplatforme.
  • Anvend DevOps-praksis, infrastruktur som kode, CI/CD, automatiseret test og versionsstyring.
  • Løs komplekse problemer med datakvalitet, ydeevne og tilgængelighed, og driv løbende forbedringer.

Krav

  • Tidligere erfaring som arkitekt eller teknisk leder for enterprise-dataplatforme.
  • Praktisk kendskab til Databricks-teknologier, herunder Delta Lake, Unity Catalog, Delta Live Tables, Auto Loader og Structured Streaming.
  • Stærke kompetencer inden for Spark, PySpark og/eller Scala, Spark SQL og optimering af distribuerede jobs.
  • Baggrund inden for design af datavarehuse og Lakehouse.
  • Praktisk kendskab til Medallion-, Lambda- og Kappa-mønstre.
  • Erfaring med integration af SaaS-, ETL- eller connectorværktøjer som Fivetran.
  • Erfaring med orkestreringsværktøjer som Airflow, Azure Data Factory og Data Fabric.
  • Erfaring med relationelle og hybride databaser, herunder MS SQL Server, PostgreSQL, Oracle, Azure SQL og AWS RDS/Aurora eller tilsvarende.
  • Kendskab til CI/CD for datapipelines med Azure DevOps, GitHub Actions, Jenkins eller lignende værktøjer.
  • Erfaring med pakning og udrulning af artefakter som .whl-filer og containere.
  • Erfaring med batch- og streamingbehandling, filkomprimering, partitionering og lagringstilpasning.
  • Forståelse af cloud-sikkerhed, IAM/RBAC, kryptering, VPC/VNet-begreber og cloud-netværk.
  • Kendskab til værktøjer til observerbarhed og overvågning som Prometheus, Grafana, Datadog eller indbyggede cloudtjenester.
  • Erfaring med automatisering via CI/CD-pipelines og trunk-baseret udvikling er en fordel.
  • Avancerede PySpark-kompetencer er en fordel.
  • Avancerede kompetencer inden for optimering og orkestrering af Spark-workflows er en fordel.
  • Certificeringer inden for Databricks, cloudarkitektur eller data er en fordel.
  • Evne til at identificere, fejlfinde og løse komplekse dataproblemer.
  • Gode samarbejds- og kommunikationsevner.
  • Nysgerrighed og åbenhed over for nye værktøjer, teknologier og metoder.

Fordele

  • Fuldtidsstilling.
  • Arbejdsmiljø med lige muligheder og plads til alle.
  • Engagement i mangfoldighed.

Relaterede job

Lunar Solar Group

Data scientist inden for marketingmåling (fjernarbejde, USA)

Lunar Solar Group
51 – 200 Medarbejdere
E-handelMarkedsføringRådgivning

Opbyg måling af attribuering, inkrementalitet og mediemix for Lunar Solar Group, et vækstkonsulenthus og digitalt marketingbureau. Omsæt analyser til praktiske budgetanbefalinger til kunderne.

Åbn
Airbnb

Senior dataforsker inden for people analytics-forskning

Airbnb
5.001 – 10.000 Medarbejdere
Sponsor for H1B-visumE-handelLogistikRejser

Led forskning inden for people analytics hos Airbnb, og brug kausal inferens og statistisk modellering til at kvalificere beslutninger om arbejdsstyrke, løn, rekruttering og fastholdelse. Samarbejd med interessenter om følsomme analyser og rapportering.

Åbn