Allata
Allata
Allata er et globalt konsulentselskap som hjelper organisasjoner med å omsette digital strategi til konkrete forbedringer i virksomheten. Teamene arbeider med strategi, kundeopplevelse, sky og teknologi, data samt kunstig intelligens, og støtter kunder med modernisering, personalisering og mer effektiv drift. Allata betjener blant annet bilbransjen, helsesektoren, logistikk, finansielle tjenester og høyteknologi. Selskapet bruker erfaring fra tidligere IT-ledere og konsulenter til å veilede komplekse digitale initiativer.

Databricks data plattformsjef (fjernarbeid, Texas)

Led arkitektur og leveranser av styrte Lakehouse-plattformer og enterprise-datavarehus for Allata. Veiled datapipelines, sikkerhet, skalerbarhet og utvikling av dataprodukter.

Beskrivelse

  • Fastsett arkitektur, teknologivalg, referansemønstre og integrasjonsplaner for Lakehouse-plattformer og enterprise-datavarehus.
  • Opprett konseptuelle, logiske og fysiske modeller for dataprodukter med flere leietakere og bransjespesifikke dataprodukter.
  • Standardiser datalag for innlasting, rålagring, kuratering og levering.
  • Etabler styringspraksis for metadata, kataloger, dataopprinnelse, datakontrakter og klassifisering.
  • Definer sikkerhets- og etterlevelseskontroller for tilgang, maskering, kryptering, nettverkssegmentering og revisjon.
  • Planlegg for plattformskalerbarhet, høy tilgjengelighet, katastrofegjenoppretting, kapasitet og kostnadsstyring.
  • Led valg og integrasjon av Databricks, Delta Lake, Delta Live Tables, Fivetran, Azure Data Factory eller Data Fabric samt verktøy for orkestrering og overvåking.
  • Fastsett og håndhev CI/CD-praksis for dataressurser, inkludert tester, automatiserte utrullinger og planer for tilbakerulling.
  • Definer metoder for batch- og strømmingsinnlasting, komprimering, partisjonering og lagring.
  • Fastsett standarder for observerbarhet av måledata, SLA-er, dashbord, logger, spor og varsler.
  • Gi teknisk ledelse og veiledning til datateknikkteam.
  • Gjennomgå arkitektur og kode for kritiske komponenter.
  • Samarbeid med Data Product Owners og interessenter innen sikkerhet, infrastruktur, BI og ML for å omsette krav til løsninger og veikart.
  • Bygg, test og distribuer behandlingsmoduler med Spark, PySpark eller Scala, Spark SQL og lagrede prosedyrer.
  • Utvikle og finjuster datapipelines på Databricks- og databaseplattformer.
  • Bruk DevOps-praksis, infrastruktur som kode, CI/CD, automatisert testing og versjonskontroll.
  • Løs komplekse problemer med datakvalitet, ytelse og tilgjengelighet, og driv kontinuerlige forbedringer.

Krav

  • Tidligere erfaring som arkitekt eller teknisk leder for enterprise-dataplattformer.
  • Praktisk kunnskap om Databricks-teknologier, inkludert Delta Lake, Unity Catalog, Delta Live Tables, Auto Loader og Structured Streaming.
  • Sterke ferdigheter i Spark, PySpark og/eller Scala, Spark SQL og optimalisering av distribuerte jobber.
  • Bakgrunn innen design av datavarehus og Lakehouse.
  • Praktisk kunnskap om Medallion-, Lambda- og Kappa-mønstre.
  • Erfaring med integrasjon av SaaS-, ETL- eller koblingsverktøy som Fivetran.
  • Erfaring med orkestreringsverktøy som Airflow, Azure Data Factory og Data Fabric.
  • Erfaring med relasjons- og hybriddatabaser, inkludert MS SQL Server, PostgreSQL, Oracle, Azure SQL og AWS RDS/Aurora eller tilsvarende.
  • Kunnskap om CI/CD for datapipelines med Azure DevOps, GitHub Actions, Jenkins eller lignende verktøy.
  • Erfaring med pakking og distribusjon av artefakter som .whl-filer og containere.
  • Erfaring med batch- og strømmingsbehandling, filkomprimering, partisjonering og lagringsjustering.
  • Forståelse av skysikkerhet, IAM/RBAC, kryptering, VPC/VNet-konsepter og skybasert nettverk.
  • Kjennskap til verktøy for observerbarhet og overvåking som Prometheus, Grafana, Datadog eller innebygde skytjenester.
  • Erfaring med automatisering ved hjelp av CI/CD-pipelines og trunk-basert utvikling er en fordel.
  • Avanserte PySpark-ferdigheter er en fordel.
  • Avanserte ferdigheter innen optimalisering og orkestrering av Spark-arbeidsflyter er en fordel.
  • Sertifiseringer innen Databricks, skyarkitektur eller data er en fordel.
  • Evne til å identifisere, feilsøke og løse komplekse dataproblemer.
  • Gode samarbeids- og kommunikasjonsevner.
  • Nysgjerrighet og åpenhet for nye verktøy, teknologier og metoder.

Fordeler

  • Heltidsstilling.
  • Arbeidsmiljø med like muligheter og inkludering.
  • Engasjement for mangfold.

Relaterte jobber

Lunar Solar Group

Dataforsker innen markedsføringsmåling (fjernarbeid, USA)

Lunar Solar Group

Bygg opp måling av attribusjon, inkrementell effekt og mediemiks for Lunar Solar Group, et vekstkonsulentselskap og digitalt markedsføringsbyrå. Gjør analyser om til praktiske budsjettanbefalinger for kundene.

Åpne
Airbnb

Senior dataforsker innen people analytics-forskning

Airbnb

Led forskning innen people analytics hos Airbnb, og bruk kausal inferens og statistisk modellering til å informere beslutninger om arbeidsstyrke, kompensasjon, rekruttering og det å beholde ansatte. Samarbeid med interessenter om sensitive analyser og rapportering.

Åpne