Sigma Software Group
Sigma Software Group
Sigma Software Group multinacionalna je tehnološka konzultantska tvrtka osnovana 2002. godine. Njezini timovi pružaju razvoj softvera, grafički dizajn, testiranje i tehničku podršku klijentima u sektorima kao što su automobilska industrija, zdravstvo, telekomunikacije, zrakoplovstvo, bankarstvo, industrija videoigara, nekretnine i oglašavanje. Tvrtka zapošljava IT stručnjake za rad na složenim inženjerskim projektima te podržava profesionalni razvoj kroz mentorstvo i kontinuirano učenje. Mogućnosti rada na daljinu dio su njezina načina rada, a projekti služe organizacijama kao što su AstraZeneca, Scania i SAS.

Senior inženjer podataka – migracija na Databricks

Migrirajte analitičku platformu maloprodaje velikih razmjera s BigQueryja na Databricks te gradite Lakehouse arhitekture i Spark pipelineove. U Sigma Software Groupu razvijajte upravljana podatkovna rješenja.

Opis

  • Pomozite migrirati analitičku platformu velikih razmjera s BigQueryja na Databricks.
  • Dizajnirajte i gradite skalabilne Lakehouse arhitekture uz Databricks i Delta Lake.
  • Procijenite postojeća ETL i ELT radna opterećenja te definirajte planove migracije.
  • Razvijajte i optimizirajte pipelineove za velike količine maloprodajnih i analitičkih podataka.
  • Izradite strategije inkrementalne obrade i skalabilne okvire za transformaciju podataka.
  • Gradite i održavajte rješenja za obradu podataka u Sparku uz PySpark.
  • Dizajnirajte i održavajte slojeve Bronze, Silver i Gold u medallion arhitekturi.
  • Primjenjujte prakse upravljanja podacima i sigurnosti uz Unity Catalog.
  • Surađujte s timovima Data Science, Analytics, Product i Customer Engineering.
  • Sudjelujte u raspravama o arhitekturi i oblikovanju tehničkih rješenja.
  • Izrađujte ponovno iskoristive komponente podatkovne platforme i inženjerske standarde.
  • Pregledavajte kod i poboljšavajte pouzdanost i održivost platforme.
  • Dijagnosticirajte i optimizirajte složena SQL i Spark radna opterećenja.
  • Podržavajte produkcijska izdanja i modernizaciju platforme.

Zahtjevi

  • Najmanje pet godina profesionalnog iskustva u podatkovnom inženjerstvu.
  • Napredno poznavanje Pythona i SQL-a.
  • Praktično komercijalno iskustvo s Databricksom.
  • Dobro poznavanje Apache Sparka, osobito PySparka.
  • Iskustvo u dizajniranju i izgradnji modernih podatkovnih platformi u oblaku.
  • Iskustvo u razvoju ETL ili ELT pipelineova i rješenja za obradu podataka velikih razmjera.
  • Praktično iskustvo s Delta Lakeom.
  • Iskustvo sa Spark Declarative Pipelines.
  • Iskustvo s nadzorom klastera, analizom metrika i optimizacijom performansi.
  • Dobro razumijevanje arhitektura distribuirane obrade podataka.
  • Dobro poznavanje skladišta podataka i dimenzionalnog modeliranja.
  • Iskustvo s Airflowom ili sličnim alatom za orkestraciju.
  • Iskustvo s optimizacijom složenih analitičkih SQL radnih opterećenja.
  • Iskustvo s primjenom CI/CD praksi za platforme podatkovnog inženjerstva.
  • Izražene vještine rješavanja problema i optimizacije performansi.
  • Sposobnost suradnje s međufunkcionalnim timovima u međunarodnom okruženju.
  • Engleski na višoj srednjoj razini ili višoj.

Pogodnosti

  • Kontinuirane mogućnosti učenja.
  • Mogućnosti za razvoj stručnosti u tehnologiji.
  • Smislen doprinos kroz inženjerski rad.
  • Rad na složenim međunarodnim projektima.

Povezani poslovi

Lightspark

Voditelj licenciranja i revizija

Lightspark

Voditi licenciranje prijenosa novca na razini saveznih država, regulatorne nadzore i revizije za Lightspark Payments. Surađivati s timovima za usklađenost, pravne poslove i poslovanje radi podrške globalnoj platnoj infrastrukturi Lightsparka.

Otvori
Humana

Izvršni voditelj ugovaranja s pružateljima usluga Humane (tržište Alabame)

Humana

Pregovarajte o ugovorima s pružateljima usluga i upravljajte odnosima unutar mreže Humane na tržištu Alabame. Udaljena uloga obuhvaća ugovaranje s pružateljima, analizu naknada i pronalaženje novih pružatelja diljem regije.

Otvori