Sigma Software Group
Sigma Software Group
Sigma Software Group je mezinárodní technologická poradenská společnost založená v roce 2002. Její týmy zajišťují vývoj softwaru, grafický design, testování a technickou podporu pro klienty z odvětví, jako jsou automobilový průmysl, zdravotnictví, telekomunikace, letectví, bankovnictví, herní průmysl, nemovitosti a reklama. Společnost zaměstnává IT specialisty, kteří pracují na komplexních inženýrských projektech, a podporuje jejich profesní rozvoj prostřednictvím mentoringu a průběžného vzdělávání. Práce na dálku je součástí pracovního modelu společnosti a její projekty slouží organizacím, jako jsou AstraZeneca, Scania a SAS.

Seniorní datový inženýr pro migraci na Databricks

Migrace rozsáhlé analytické platformy pro maloobchod z BigQuery na Databricks: návrh architektur Lakehouse, Spark pipeline a řízených datových řešení ve společnosti Sigma Software Group.

Popis

  • Pomáhat s migrací rozsáhlé analytické platformy z BigQuery na Databricks.
  • Navrhovat a vytvářet škálovatelné architektury Lakehouse s Databricks a Delta Lake.
  • Posuzovat stávající úlohy ETL a ELT a definovat migrační plány.
  • Vyvíjet a ladit pipeline pro velké objemy maloobchodních a analytických dat.
  • Vytvářet strategie přírůstkového zpracování a škálovatelné rámce pro transformaci dat.
  • Vytvářet a udržovat řešení pro zpracování dat ve Sparku pomocí PySparku.
  • Navrhovat a udržovat vrstvy Bronze, Silver a Gold v medailonové architektuře.
  • Uplatňovat postupy správy dat a zabezpečení pomocí Unity Catalog.
  • Spolupracovat s týmy Data Science, analytiky, produktovými týmy a zákaznickým inženýrstvím.
  • Podílet se na diskusích o architektuře a návrhu technických řešení.
  • Vytvářet opakovaně použitelné komponenty datové platformy a inženýrské standardy.
  • Provádět revize kódu a zvyšovat spolehlivost platformy i její udržovatelnost.
  • Diagnostikovat a optimalizovat složité úlohy SQL a Spark.
  • Podporovat produkční vydání a modernizaci platformy.

Požadavky

  • Nejméně pět let odborné praxe v oblasti datového inženýrství.
  • Pokročilá znalost Pythonu a SQL.
  • Praktická komerční zkušenost s Databricks.
  • Dobrá znalost Apache Spark, zejména PySparku.
  • Zkušenosti s návrhem a tvorbou moderních cloudových datových platforem.
  • Zkušenosti s vývojem pipeline ETL nebo ELT a řešení pro zpracování dat ve velkém měřítku.
  • Praktické zkušenosti s Delta Lake.
  • Zkušenosti se Spark Declarative Pipelines.
  • Zkušenosti s monitorováním clusterů, analýzou metrik a optimalizací výkonu.
  • Dobré porozumění architekturám distribuovaného zpracování dat.
  • Dobrá znalost datových skladů a dimenzionálního modelování.
  • Zkušenosti s Airflow nebo podobným nástrojem pro orchestraci.
  • Zkušenosti s laděním složitých analytických úloh SQL.
  • Zkušenosti se zaváděním postupů CI/CD pro platformy datového inženýrství.
  • Dobré schopnosti při řešení problémů a optimalizaci výkonu.
  • Schopnost spolupracovat s mezifunkčními týmy v mezinárodním prostředí.
  • Angličtina na vyšší středně pokročilé úrovni nebo vyšší.

Benefity

  • Průběžné možnosti vzdělávání.
  • Možnosti rozvíjet technologické znalosti.
  • Smysluplný přínos díky inženýrské práci.
  • Práce na komplexních mezinárodních projektech.

Související pracovní nabídky

CYOS Solutions

Seniorní inženýr pro AI a cloud — hybridní režim, Austrálie

CYOS Solutions
11 – 50 Zaměstnanci
LogistikaMarketingPoradenství

Vytvářejte zabezpečené platformy AI, strojového učení a cloudových služeb pro Services Australia. Veďte škálovatelné inženýrství, MLOps, infrastrukturu a správu v hybridních prostředích.

Otevřít
CYOS Solutions

Seniorní inženýr AI a cloudu

CYOS Solutions
11 – 50 Zaměstnanci
LogistikaMarketingPoradenství

Vytvářejte zabezpečené podnikové platformy AI a cloudu pro Services Australia. Dodávejte MLOps, automatizaci infrastruktury a hybridní cloudová řešení pro služby australské vlády.

Otevřít
CYOS Solutions

Seniorní inženýr AI, cloudová AI

CYOS Solutions
11 – 50 Zaměstnanci
LogistikaMarketingPoradenství

Vytvářejte zabezpečené platformy AI a strojového učení i cloudovou infrastrukturu pro Services Australia. Veďte škálovatelná řešení splňující požadavky ve veřejném cloudu, místních i hybridních prostředích.

Otevřít
CYOS Solutions

Seniorní inženýr pro AI a cloud

CYOS Solutions
11 – 50 Zaměstnanci
LogistikaMarketingPoradenství

Budujte zabezpečené platformy AI a strojového učení i cloudovou infrastrukturu pro Services Australia. Veďte škálovatelná řešení ve veřejných, lokálních i hybridních prostředích.

Otevřít
Reddit, Inc.

Manažer komunity se znalostí nizozemštiny

Reddit, Inc.
501 – 1 000 Zaměstnanci
MarketingMédiaPoradenství

Rozvíjejte nizozemsky mluvící komunity Redditu, podporujte růst moderátorů, přizpůsobujte iniciativy na získávání uživatelů místním potřebám a vytvářejte programy založené na datech. Pomáhejte rozšiřovat mezinárodní působení Redditu mimo Spojené státy.

Otevřít