Sigma Software Group
Sigma Software Group
Sigma Software Group je mezinárodní technologická poradenská společnost založená v roce 2002. Její týmy zajišťují vývoj softwaru, grafický design, testování a technickou podporu pro klienty z odvětví, jako jsou automobilový průmysl, zdravotnictví, telekomunikace, letectví, bankovnictví, herní průmysl, nemovitosti a reklama. Společnost zaměstnává IT specialisty, kteří pracují na komplexních inženýrských projektech, a podporuje jejich profesní rozvoj prostřednictvím mentoringu a průběžného vzdělávání. Práce na dálku je součástí pracovního modelu společnosti a její projekty slouží organizacím, jako jsou AstraZeneca, Scania a SAS.

Seniorní datový inženýr — migrace na Databricks

Migrace podnikové maloobchodní analytiky z BigQuery do Databricks Lakehouse. Tvorba škálovatelných pipeline v PySpark, medailonové architektury a spravovaných cloudových datových platforem.

Popis

  • Pomáhat s migrací rozsáhlé analytické platformy z BigQuery na Databricks.
  • Navrhovat a vytvářet škálovatelné architektury Lakehouse s Databricks a Delta Lake.
  • Vyhodnocovat stávající úlohy ETL a ELT a určovat postupy migrace.
  • Vytvářet a optimalizovat pipeline pro velké objemy maloobchodních a analytických dat.
  • Zavádět strategie přírůstkového zpracování a škálovatelné rámce pro transformaci dat.
  • Vyvíjet a udržovat řešení pro zpracování dat ve Sparku pomocí PySpark.
  • Navrhovat a udržovat medailonové vrstvy Bronze, Silver a Gold.
  • Uplatňovat postupy správy a zabezpečení dat pomocí Unity Catalog.
  • Spolupracovat s týmy Data Science, analytiky, produktovým týmem a zákaznickým inženýrstvím.
  • Podílet se na diskusích o architektuře a návrhu technických řešení.
  • Vytvářet opakovaně použitelné komponenty datové platformy a technické standardy.
  • Provádět revize kódu a zvyšovat spolehlivost i udržovatelnost platformy.
  • Řešit problémy a optimalizovat složité úlohy SQL a Spark.
  • Podporovat nasazování do produkce a modernizaci platformy.

Požadavky

  • Mít alespoň pět let odborné praxe na pozici datového inženýra.
  • Dobře programovat v Pythonu a ovládat SQL na pokročilé úrovni.
  • Mít praktické komerční zkušenosti s Databricks.
  • Dobře znát Apache Spark, zejména PySpark.
  • Mít zkušenosti s návrhem a budováním moderních cloudových datových platforem.
  • Mít zkušenosti s vývojem pipeline ETL a ELT a řešení pro zpracování dat ve velkém měřítku.
  • Mít praktické zkušenosti s Delta Lake.
  • Mít zkušenosti se Spark Declarative Pipelines.
  • Mít zkušenosti s monitorováním clusterů, analýzou metrik a optimalizací výkonu.
  • Rozumět architekturám distribuovaného zpracování dat.
  • Rozumět principům datových skladů a dimenzionálního modelování.
  • Mít zkušenosti s Airflow nebo srovnatelným nástrojem pro orchestrace.
  • Mít zkušenosti s optimalizací složitých analytických úloh SQL.
  • Mít zkušenosti s uplatňováním postupů CI/CD na platformách datového inženýrství.
  • Umět řešit problémy a optimalizovat výkon.
  • Efektivně spolupracovat v mezifunkčních mezinárodních týmech.
  • Ovládat angličtinu na úrovni vyšší středně pokročilý (Upper-Intermediate) nebo vyšší.

Benefity

  • Zaměstnanci mohou pracovat na dálku.
  • Možnosti průběžného vzdělávání.
  • Možnosti profesního růstu spolu s rozvojem technologií.
  • Možnost významně přispět prostřednictvím inženýrské práce.
  • Práce na složitých mezinárodních projektech.

Související pracovní nabídky

Intetics

Datový inženýr pro strojové učení — práce na dálku z Rumunska

Intetics
501 – 1 000 Zaměstnanci
LogistikaPoradenstvíZdravotní péče

Budujte datovou infrastrukturu v reálném čase, grafové modely a systémy časových řad pro analýzu sportovních výkonů. Podporujte vyhodnocování strojového učení a systémy AI pro zákazníka společnosti Intetics ze Spojených států.

Otevřít
AllCloud

Datový inženýr se znalostí hebrejštiny

AllCloud

Vytvářejte lakehouse platformy, datové pipeline a řešení AI pro klienty AllCloud využívající cloudové poradenství. Navrhujte škálovatelné architektury a pomáhejte zákazníkům modernizovat jejich datové systémy.

Otevřít
Globaldev Group

Vzdálený backendový datový inženýr — Ukrajina

Globaldev Group
201 – 500 Zaměstnanci
LogistikaPoradenstvíSaaS

Budujte škálovatelné datové pipeline, modely a backendovou infrastrukturu pro rozvíjející se datové produkty. Pracujte s nástroji dbt, Snowflake, Databricks, platformami pro orchestraci a vývojovými nástroji GenAI.

Otevřít