Allata
Allata
Allata är ett globalt konsultföretag som hjälper organisationer att omsätta digital strategi i konkreta verksamhetsförbättringar. Företagets team arbetar med strategi, kundupplevelse, molntjänster och teknik, data samt artificiell intelligens och hjälper kunder med modernisering, personalisering och effektivare verksamhetsprocesser. Allata arbetar inom bland annat fordonsindustrin, hälso- och sjukvården, logistik, finansiella tjänster och högteknologi. Företaget använder erfarenhet från tidigare IT-chefer och konsulter för att vägleda komplexa digitala satsningar.

Databricks data plattformschef (distans, Texas)

Led arkitektur och leverans av styrda Lakehouse-plattformar och företagsdatavaruhus för Allata. Vägled datapipelines, säkerhet, skalbarhet och utveckling av dataprodukter.

Beskrivning

  • Fastställ arkitektur, teknikval, referensmönster och integrationsritningar för Lakehouse-plattformar och företagsdatavaruhus.
  • Skapa konceptuella, logiska och fysiska modeller för dataprodukter med flera hyresgäster och branschspecifika dataprodukter.
  • Standardisera datalager för inläsning, rålagring, förädling och tillgängliggörande.
  • Etablera styrningsrutiner för metadata, kataloger, datahärkomst, datakontrakt och klassificering.
  • Definiera säkerhets- och efterlevnadskontroller för åtkomst, maskering, kryptering, nätverkssegmentering och granskning.
  • Planera för plattformsskalbarhet, hög tillgänglighet, katastrofåterställning, kapacitet och kostnadshantering.
  • Leda val och integration av Databricks, Delta Lake, Delta Live Tables, Fivetran, Azure Data Factory eller Data Fabric samt verktyg för orkestrering och övervakning.
  • Fastställa och upprätthålla CI/CD-rutiner för datatillgångar, inklusive tester, automatiserade releaser och återställningsplaner.
  • Definiera metoder för batch- och strömningsinläsning, kompaktering, partitionering och lagring.
  • Fastställa standarder för observerbarhet av mätvärden, SLA:er, instrumentpaneler, loggar, spår och aviseringar.
  • Ge tekniskt ledarskap och mentorskap till datateknikteam.
  • Granska arkitektur och kod för kritiska komponenter.
  • Samarbeta med data Product Owners samt intressenter inom säkerhet, infrastruktur, BI och ML för att omvandla krav till lösningar och färdplaner.
  • Bygga, testa och driftsätta bearbetningsmoduler med Spark, PySpark eller Scala, Spark SQL och lagrade procedurer.
  • Utveckla och finjustera datapipelines på Databricks och databasplattformar.
  • Tillämpa DevOps-rutiner, infrastruktur som kod, CI/CD, automatiserade tester och versionshantering.
  • Lösa komplexa problem med datakvalitet, prestanda och tillgänglighet samt driva kontinuerliga förbättringar.

Krav

  • Tidigare erfarenhet som arkitekt eller teknisk ledare för företagsdataplattformar.
  • Praktisk kunskap om Databricks-teknik, inklusive Delta Lake, Unity Catalog, Delta Live Tables, Auto Loader och Structured Streaming.
  • Goda kunskaper i Spark, PySpark och/eller Scala, Spark SQL och optimering av distribuerade jobb.
  • Bakgrund inom design av datavaruhus och Lakehouse.
  • Praktisk kunskap om Medallion-, Lambda- och Kappa-mönster.
  • Erfarenhet av att integrera SaaS-, ETL- eller anslutningsverktyg som Fivetran.
  • Erfarenhet av orkestreringsverktyg som Airflow, Azure Data Factory och Data Fabric.
  • Erfarenhet av relationsdatabaser och hybriddatabaser, däribland MS SQL Server, PostgreSQL, Oracle, Azure SQL och AWS RDS/Aurora eller motsvarande.
  • Goda kunskaper i CI/CD för datapipelines med Azure DevOps, GitHub Actions, Jenkins eller liknande verktyg.
  • Erfarenhet av paketering och driftsättning av artefakter som .whl-filer och containrar.
  • Erfarenhet av batch- och strömningsbearbetning, filkompaktering, partitionering och lagringsjustering.
  • Förståelse för molnsäkerhet, IAM/RBAC, kryptering, VPC/VNet-koncept och molnnätverk.
  • Kännedom om verktyg för observerbarhet och övervakning som Prometheus, Grafana, Datadog eller inbyggda molntjänster.
  • Erfarenhet av automatisering med CI/CD-pipelines och trunkbaserad utveckling är meriterande.
  • Avancerade kunskaper i PySpark är meriterande.
  • Avancerade kunskaper i optimering och orkestrering av Spark-arbetsflöden är meriterande.
  • Certifieringar inom Databricks, molnarkitektur eller data är meriterande.
  • Förmåga att identifiera, felsöka och lösa komplexa dataproblem.
  • God samarbets- och kommunikationsförmåga.
  • Nyfikenhet och öppenhet för nya verktyg, tekniker och metoder.

Förmåner

  • Heltidstjänst.
  • En inkluderande arbetsmiljö med lika möjligheter.
  • Engagemang för mångfald.

Relaterade jobb

Lunar Solar Group

Data scientist inom marknadsföringsmätning (distans, USA)

Lunar Solar Group

Bygg upp mätning av attribuering, inkrementell effekt och mediemix för Lunar Solar Group, en tillväxtkonsult och digital marknadsföringsbyrå. Omsätt analyser i praktiska budgetrekommendationer för kunder.

Öppna
Airbnb

Senior data scientist inom forskning i people analytics

Airbnb
5 001 – 10 000 Anställda
Sponsor för H1B-visumE-handelLogistikResor

Led forskning inom people analytics på Airbnb och använd kausal inferens och statistisk modellering för att informera beslut om personal, ersättning, rekrytering och personalbehållning. Samarbeta med intressenter kring känsliga analyser och rapportering.

Öppna