Sigma Software Group multinacionalna je tehnološka konzultantska tvrtka osnovana 2002. godine. Njezini timovi pružaju razvoj softvera, grafički dizajn, testiranje i tehničku podršku klijentima u sektorima kao što su automobilska industrija, zdravstvo, telekomunikacije, zrakoplovstvo, bankarstvo, industrija videoigara, nekretnine i oglašavanje. Tvrtka zapošljava IT stručnjake za rad na složenim inženjerskim projektima te podržava profesionalni razvoj kroz mentorstvo i kontinuirano učenje. Mogućnosti rada na daljinu dio su njezina načina rada, a projekti služe organizacijama kao što su AstraZeneca, Scania i SAS.
Inženjer za podatke (Azure, Spark) — rad na daljinu u Ukrajini
Gradite skalabilne podatkovne platforme i cjevovode na Azureu za analitiku, izvještavanje i donošenje odluka na temelju podataka. Razvijajte Spark tijekove rada i pouzdanu obradu podataka u suradnji s više timova.
Opis
- Gradite skalabilne i pouzdane podatkovne platforme i cjevovode za analitičke i operativne potrebe.
- Izrađujte tijekove obrade podataka pomoću distribuiranih okvira kao što su Apache Spark i PySpark na Databricksu.
- Pomozite unaprijediti podatkovnu platformu u oblaku pomoću Azureovih usluga, uključujući Data Factory, Synapse, Microsoft Fabric, Databricks, Event Hub i Azure Data Lake Storage.
- Integrirajte i obrađujte interne i vanjske podatke uz očuvanje dosljednosti, kvalitete i pouzdanosti.
- Preuzmite odgovornost za pouzdanost, nadzor i performanse cjevovoda.
- Surađujte s analitičarima, podatkovnim znanstvenicima i inženjerima kako biste poslovne i analitičke potrebe pretvorili u robusna podatkovna rješenja.
- Unapređujte praksu podatkovnog inženjerstva, uključujući standarde cjevovoda, testiranje i operativnu pouzdanost.
- Procjenjujte alate i tehnologije za okruženje podatkovnog inženjerstva te pomozite u njihovu uvođenju.
Zahtjevi
- Najmanje četiri godine praktičnog iskustva u podatkovnom inženjerstvu ili izgradnji platformi za obradu podataka.
- Sigurno se služite SQL-om i dobro poznajete Python za razvoj i održavanje podatkovnih cjevovoda.
- Iskustvo s distribuiranim okvirima za obradu podataka kao što su Apache Spark ili PySpark; iskustvo s Databricksom velika je prednost.
- Praktično iskustvo u dizajniranju i implementaciji podatkovnih cjevovoda u oblaku, po mogućnosti na Azureu.
- Iskustvo u dizajniranju cjevovoda i podatkovnih modela za analitičke sustave produkcijskog opsega.
- Razumijevanje dizajna ETL/ELT procesa, dimenzijskog modeliranja i načela skladištenja podataka.
- Iskustvo s modernim arhitekturama podatkovnih jezera i formatima kao što su Parquet i JSON.
- Iskustvo s alatima za orkestraciju tijekova rada kao što je Airflow.
- Iskustvo u razvoju baza podataka i optimizaciji performansi.
- Sposobnost dizajniranja skalabilnih podatkovnih rješenja koja se lako održavaju, uz minimalan nadzor.
- Učinkovito komunicirate i surađujete s drugima.
- Profesionalno se služite engleskim jezikom.
- Iskustvo s podatkovnim skladištima u oblaku kao što su Snowflake, BigQuery ili Redshift.
- Iskustvo sa streaming tehnologijama kao što su Event Hub, Kafka ili Spark Streaming.
- Iskustvo s Delta Lakeom ili drugim lakehouse tehnologijama.
- Poznavanje praksi CI/CD-a i razvojnih tijekova rada temeljenih na Gitu.
- Iskustvo rada u agilnim razvojnim okruženjima.
Pogodnosti
- Rad na daljinu.