GFT Technologies je tehnološko podjetje, ki se ukvarja z digitalno preobrazbo ter deluje na področjih svetovanja, zavarovalništva in kibernetske varnosti. Njegova platforma Cookiebot organizacijam pomaga zbirati in upravljati soglasja uporabnikov ter podpirati skladnost s predpisi o zasebnosti, vključno z uredbama GDPR in CCPA. Rešitve podjetja so zasnovane za integracijo v obstoječa digitalna okolja, uporablja pa jih več kot 600.000 strank po vsem svetu za bolj pregledno in nadzorovano upravljanje osebnih podatkov.
Srednji/višji podatkovni inženir za Azure Databricks – delo na daljavo iz Kolumbije
Načrtujte in optimizirajte podatkovne cevovode ter oblačne arhitekture v okoljih Azure in Databricks pri podjetju GFT Technologies. Pripravljajte zaupanja vredne podatke za analitiko, umetno inteligenco in strojno učenje.
Opis
- Načrtujte, gradite in optimizirajte podatkovne arhitekture na platformah Azure in Databricks
- Izvajajte procese ETL in ELT za integracijo več virov informacij
- Načrtujte in upravljajte arhitekture Data Lake in Lakehouse
- Spremljajte podatkovne cevovode, da zagotovite doslednost, kakovost, sledljivost in varnost
- Pripravljajte in optimizirajte nabore podatkov za napredno analitiko, poročanje in modele strojnega učenja
- Sodelujte z ekipami za BI, analitiko in podatkovno znanost za izboljšanje dostopa do informacij
- Določajte in izvajajte upravljanje podatkov ter nadzore kakovosti
- Izvajajte procese neprekinjene integracije in neprekinjenega uvajanja za podatkovne rešitve
- Načrtujte razširljive rešitve za porazdeljeno obdelavo in velike količine podatkov
- Prepoznavajte izboljšave za optimizacijo stroškov, zmogljivosti in časa obdelave
- Ocenjujte nove tehnologije in najboljše prakse za napredek podatkovne platforme
Zahteve
- Diploma iz sistemskega inženirstva, industrijskega inženirstva, elektronskega inženirstva, mehatronike ali sorodnega področja
- Tri do pet let izkušenj kot podatkovni inženir
- Napredno znanje SQL
- Izkušnje s Pythonom ali Scalo
- Izkušnje s porazdeljeno obdelavo z uporabo PySpark
- Izkušnje z Azure Databricks
- Izkušnje z Azure Data Factory
- Izkušnje z Azure Data Lake Storage Gen2 (ADLS Gen2)
- Poznavanje Delta Lake
- Izkušnje z arhitekturami Lakehouse
- Poznavanje medallion arhitekture
- Izkušnje z dimenzionalnim modeliranjem
- Izkušnje z relacijskimi podatkovnimi bazami
- Izkušnje z bazami podatkov NoSQL
- Poznavanje upravljanja podatkov in kakovosti podatkov
- Izkušnje z Unity Catalog
- Izkušnje z Delta Live Tables (DLT)
- Poznavanje Great Expectations
- Izkušnje s pretočno obdelavo prek Event Hubs
- Izkušnje z Azure DevOps in Git
- Poznavanje Entra ID
- Poznavanje RBAC
- Znanje Power BI
- Znanje Visual Studio Code
- Izkušnje z integracijo podatkov in procesi ETL/ELT
- Izkušnje z analizo in modeliranjem podatkov
- Certifikati Azure Data Engineering so prednost
- Izkušnje s projekti umetne inteligence in strojnega učenja so prednost
- Poznavanje DataOps in avtomatizacije podatkovnih platform je prednost
Ugodnosti
- Prilagodljiv delovni čas
- Delo na daljavo
- Prilagojen načrt kariernega razvoja
- Programi usposabljanja
- Delo v multidisciplinarnih ekipah
- Raznolika globalna ekipa
- Projekti z velikim vplivom za vodilne naročnike iz različnih panog