Allata
Allata
Allata je globálna poradenská spoločnosť, ktorá pomáha organizáciám premieňať digitálnu stratégiu na praktické zlepšenia podnikania. Jej tímy pôsobia v oblastiach stratégie, zákazníckej skúsenosti, cloudu a technológií, dát a umelej inteligencie a podporujú klientov pri modernizácii, personalizácii a zvyšovaní prevádzkovej efektívnosti. Allata pôsobí v odvetviach, ako sú automobilový priemysel, zdravotníctvo, logistika, finančné služby a špičkové technológie. Pri riadení komplexných digitálnych iniciatív využíva skúsenosti bývalých IT lídrov a odborníkov na poradenstvo.

Manažér dátovej platformy Databricks (práca na diaľku, Texas)

Veďte návrh architektúry a dodávku platforiem Lakehouse a podnikových dátových skladov pre Allata. Usmerňujte dátové pipeline, bezpečnosť, škálovateľnosť a vývoj dátových produktov.

Popis

  • Navrhovať architektúru, vyberať technológie a určovať referenčné vzory a integračné návrhy pre platformy Lakehouse a podnikové dátové sklady.
  • Vytvárať konceptuálne, logické a fyzické modely pre dátové produkty s podporou viacerých nájomcov a zamerané na konkrétne odvetvia.
  • Štandardizovať dátové vrstvy na príjem, nespracované ukladanie, spracovanie a poskytovanie dát.
  • Zavádzať postupy správy metadát, katalógov, pôvodu dát, dátových kontraktov a klasifikácie.
  • Definovať bezpečnostné a súladové opatrenia pre prístup, maskovanie, šifrovanie, segmentáciu siete a auditovanie.
  • Plánovať škálovateľnosť platformy, vysokú dostupnosť, obnovu po havárii, kapacitu a riadenie nákladov.
  • Viesť výber a integráciu nástrojov Databricks, Delta Lake, Delta Live Tables, Fivetran, Azure Data Factory alebo Data Fabric, ako aj nástrojov na orchestráciu a monitorovanie.
  • Stanovovať a presadzovať postupy CI/CD pre dátové aktíva vrátane testov, automatizovaných vydaní a plánov návratu k predchádzajúcej verzii.
  • Definovať prístupy k dávkovému a streamovaciemu príjmu dát, kompakcii, rozdeľovaniu na partície a ukladaniu.
  • Stanovovať štandardy pozorovateľnosti pre metriky, SLA, dashboardy, logy, trasovanie a upozornenia.
  • Poskytovať technické vedenie a mentorstvo tímom dátového inžinierstva.
  • Revidovať architektúru a kód kritických komponentov.
  • Spolupracovať s vlastníkmi dátových produktov a zástupcami bezpečnosti, infraštruktúry, BI a ML na premene požiadaviek na riešenia a plány vývoja.
  • Vytvárať, testovať a nasadzovať moduly spracovania pomocou Spark, PySpark alebo Scala, Spark SQL a uložených procedúr.
  • Vyvíjať a optimalizovať dátové pipeline v platformách Databricks a databázových platformách.
  • Uplatňovať postupy DevOps, infraštruktúru ako kód, CI/CD, automatizované testovanie a správu verzií.
  • Riešiť zložité problémy s kvalitou dát, výkonom a dostupnosťou a presadzovať priebežné zlepšovanie.

Požiadavky

  • Predchádzajúce skúsenosti s prácou architekta alebo technického vedúceho podnikových dátových platforiem.
  • Praktická znalosť technológií Databricks vrátane Delta Lake, Unity Catalog, Delta Live Tables, Auto Loader a Structured Streaming.
  • Pokročilé zručnosti v Spark, PySpark a/alebo Scala, Spark SQL a optimalizácii distribuovaných úloh.
  • Skúsenosti s návrhom dátových skladov a platforiem Lakehouse.
  • Praktická znalosť vzorov Medallion, Lambda a Kappa.
  • Skúsenosti s integráciou nástrojov SaaS, ETL alebo konektorov, napríklad Fivetran.
  • Skúsenosti s nástrojmi na orchestráciu, napríklad Airflow, Azure Data Factory a Data Fabric.
  • Skúsenosti s relačnými a hybridnými databázami vrátane MS SQL Server, PostgreSQL, Oracle, Azure SQL, AWS RDS/Aurora alebo ekvivalentov.
  • Znalosť CI/CD pre dátové pipeline pomocou Azure DevOps, GitHub Actions, Jenkins alebo podobných nástrojov.
  • Skúsenosti s balením a nasadzovaním artefaktov, napríklad súborov .whl a kontajnerov.
  • Skúsenosti s dávkovým a streamovacím spracovaním, kompaktovaním súborov, rozdeľovaním na partície a optimalizáciou ukladania.
  • Znalosť cloudovej bezpečnosti, IAM/RBAC, šifrovania, konceptov VPC/VNet a cloudových sietí.
  • Znalosť nástrojov na pozorovateľnosť a monitorovanie, napríklad Prometheus, Grafana, Datadog alebo natívnych cloudových služieb.
  • Skúsenosti s automatizáciou pomocou CI/CD pipeline a vývojom založeným na hlavnej vetve sú výhodou.
  • Pokročilé zručnosti v PySpark sú výhodou.
  • Pokročilé zručnosti v optimalizácii a orchestrácii pracovných postupov Spark sú výhodou.
  • Certifikácie Databricks, cloudovej architektúry alebo dátových technológií sú výhodou.
  • Schopnosť identifikovať, diagnostikovať a riešiť zložité problémy s dátami.
  • Dobré schopnosti spolupráce a komunikácie.
  • Zvedavosť a otvorenosť voči novým nástrojom, technológiám a metódam.

Benefity

  • Práca na plný úväzok.
  • Rovnaké príležitosti a inkluzívne pracovné prostredie.
  • Záväzok podporovať rozmanitosť.

Súvisiace pracovné ponuky

The Athletic

Senior manažér, dátová analytika

The Athletic

Veďte produktové analýzy zamerané na rast v spoločnosti The Athletic, športovom médiu. Riadiť budete analytikov a využívať experimenty na podporu rozhodnutí o predplatnom a produktoch.

Otvoriť
Lunar Solar Group

Dátový vedec pre marketingové meranie (práca na diaľku, USA)

Lunar Solar Group

Vytvárajte atribučné modely, meranie prírastkového účinku a mediálne mix modely pre Lunar Solar Group, poradenskú spoločnosť zameranú na rast a digitálny marketing. Pretavujte analýzy do praktických odporúčaní pre klientov o rozdelení rozpočtu.

Otvoriť
Airbnb

Senior dátový vedec pre výskum analytiky ľudí

Airbnb

Vedieť výskum analytiky ľudí v Airbnb a využívať kauzálnu inferenciu a štatistické modelovanie na podporu rozhodnutí o pracovnej sile, odmeňovaní, nábore a udržaní zamestnancov. Spolupracovať so zainteresovanými stranami na citlivých analýzach a reportovaní.

Otvoriť
The Cigna Group

Senior Lead dátový špecialista, práca na diaľku (USA)

The Cigna Group

Vytvárajte opakovane použiteľné dátové produkty Silver a Gold pre zdravotnícke služby Cigna pomocou Databricks a riadených MVP a CI/CD procesov. Premieňajte obchodné potreby na produkčné dátové riešenia a zavádzajte štandardy naprieč Data Operations.

Otvoriť