GFT Technologies yra technologijų ir skaitmeninės transformacijos įmonė, veikianti konsultavimo, draudimo ir kibernetinio saugumo srityse. Jos platforma „Cookiebot“ padeda organizacijoms rinkti ir valdyti naudotojų sutikimus bei padeda laikytis privatumo reglamentų, įskaitant BDAR ir CCPA. Įmonės sprendimai sukurti taip, kad būtų integruojami į esamas skaitmenines aplinkas, o jais visame pasaulyje naudojasi daugiau kaip 600 000 klientų, siekiančių skaidriau ir geriau kontroliuoti asmens duomenų tvarkymą.
Vidutinio ir vyresnio lygio Azure Databricks duomenų inžinierius – nuotolinis darbas Kolumbijoje
GFT Technologies kurkite ir optimizuokite Azure bei Databricks duomenų konvejerius ir debesijos architektūras. Ruoškite patikimus duomenis analitikai, dirbtiniam intelektui ir mašininiam mokymuisi.
Aprašymas
- Kurkite, diekite ir optimizuokite Azure ir Databricks pagrindu veikiančias duomenų architektūras
- Įgyvendinkite ETL ir ELT procesus, skirtus keliems informacijos šaltiniams integruoti
- Kurkite ir administruokite Data Lake bei Lakehouse architektūras
- Stebėkite duomenų konvejerius, kad užtikrintumėte nuoseklumą, kokybę, atsekamumą ir saugumą
- Ruoškite ir optimizuokite duomenų rinkinius pažangiajai analitikai, ataskaitoms ir mašininio mokymosi modeliams
- Bendradarbiaukite su BI, analitikos ir duomenų mokslo komandomis, kad pagerintumėte prieigą prie informacijos
- Apibrėžkite ir įgyvendinkite duomenų valdymo bei kokybės kontrolės priemones
- Įgyvendinkite nuolatinės integracijos ir nuolatinio diegimo procesus duomenų sprendimams
- Kurkite keičiamo masto sprendimus paskirstytajam apdorojimui ir dideliems duomenų kiekiams
- Nustatykite patobulinimus, optimizuojančius sąnaudas, našumą ir apdorojimo laiką
- Vertinkite naujas technologijas ir geriausią praktiką, kad tobulintumėte duomenų platformą
Reikalavimai
- Sistemų inžinerijos, pramonės inžinerijos, elektronikos inžinerijos, mechatronikos inžinerijos ar susijusios srities diplomas
- 3–5 metų duomenų inžinieriaus darbo patirtis
- Pažangios SQL žinios
- Darbo su Python arba Scala patirtis
- Paskirstytojo apdorojimo naudojant PySpark patirtis
- Darbo su Azure Databricks patirtis
- Darbo su Azure Data Factory patirtis
- Darbo su Azure Data Lake Storage Gen2 (ADLS Gen2) patirtis
- Delta Lake išmanymas
- Lakehouse architektūrų taikymo patirtis
- Medallion architektūros išmanymas
- Dimensinio modeliavimo patirtis
- Darbo su reliacinėmis duomenų bazėmis patirtis
- Darbo su NoSQL duomenų bazėmis patirtis
- Duomenų valdymo ir kokybės išmanymas
- Darbo su Unity Catalog patirtis
- Darbo su Delta Live Tables (DLT) patirtis
- Great Expectations išmanymas
- Srautinių duomenų apdorojimo per Event Hubs patirtis
- Darbo su Azure DevOps ir Git patirtis
- Entra ID išmanymas
- RBAC išmanymas
- Geros Power BI žinios
- Geros Visual Studio Code žinios
- Duomenų integravimo ir ETL/ELT procesų patirtis
- Duomenų analizės ir modeliavimo patirtis
- Azure Data Engineering sertifikatai būtų privalumas
- Dirbtinio intelekto ir mašininio mokymosi projektų patirtis būtų privalumas
- DataOps ir duomenų platformos automatizavimo išmanymas būtų privalumas
Privalumai
- Lankstus darbo laikas
- Nuotolinis darbas
- Individualus karjeros tobulėjimo planas
- Mokymo programos
- Darbas daugiadisciplinėse komandose
- Įvairialypė pasaulinė komanda
- Didelės įtakos projektai su pirmaujančiais pramonės klientais