A GFT Technologies technológiai és digitális transzformációs vállalat, amely tanácsadással, biztosítással és kiberbiztonsággal foglalkozik. Cookiebot platformja segít a szervezeteknek a felhasználói hozzájárulások begyűjtésében és kezelésében, miközben támogatja az olyan adatvédelmi szabályozásoknak való megfelelést, mint a GDPR és a CCPA. A vállalat megoldásait úgy tervezték, hogy integrálhatók legyenek a meglévő digitális környezetekbe, és világszerte több mint 600 000 ügyfél használja őket a személyes adatok átláthatóbb és ellenőrzöttebb kezelésére.
Közép- és senior szintű Azure Databricks adatmérnök – Kolumbiából végezhető távmunka
Tervezze és optimalizálja az Azure- és Databricks-adatfolyamatokat, valamint a felhőarchitektúrákat a GFT Technologiesnél. Készítsen megbízható adatokat elemzésekhez, mesterséges intelligenciához és gépi tanuláshoz.
Leírás
- Azure- és Databricks-alapú adatarchitektúrák tervezése, létrehozása és optimalizálása
- ETL- és ELT-folyamatok megvalósítása több információforrás integrálásához
- Data Lake- és Lakehouse-architektúrák tervezése és kezelése
- Adatfolyamatok monitorozása a konzisztencia, a minőség, a nyomon követhetőség és a biztonság biztosítása érdekében
- Adathalmazok előkészítése és optimalizálása fejlett elemzésekhez, jelentéskészítéshez és gépi tanulási modellekhez
- Együttműködés BI-, elemzési és adattudományi csapatokkal az információkhoz való hozzáférés javítása érdekében
- Adatirányítási és minőség-ellenőrzési folyamatok meghatározása és megvalósítása
- Folyamatos integrációs és folyamatos telepítési folyamatok megvalósítása adatmegoldásokhoz
- Skálázható megoldások tervezése elosztott feldolgozáshoz és nagy adatmennyiségekhez
- A költségeket, a teljesítményt és a feldolgozási időt optimalizáló fejlesztési lehetőségek azonosítása
- Új technológiák és bevált gyakorlatok értékelése az adatplatform továbbfejlesztéséhez
Követelmények
- Rendszermérnöki, ipari mérnöki, elektronikai mérnöki, mechatronikai mérnöki vagy kapcsolódó területen szerzett diploma
- Három–öt év tapasztalat adatmérnökként
- Haladó szintű SQL-ismeret
- Python- vagy Scala-tapasztalat
- Elosztott feldolgozási tapasztalat PySpark használatával
- Azure Databricks-tapasztalat
- Azure Data Factory-tapasztalat
- Azure Data Lake Storage Gen2 (ADLS Gen2) tapasztalata
- Delta Lake-ismeret
- Lakehouse-architektúrákban szerzett tapasztalat
- A Medallion-architektúra ismerete
- Dimenzionális modellezési tapasztalat
- Relációs adatbázisokkal szerzett tapasztalat
- NoSQL-adatbázisokkal szerzett tapasztalat
- Adatirányítási és adatminőségi ismeretek
- Unity Catalog-tapasztalat
- Delta Live Tables (DLT)-tapasztalat
- Great Expectations-ismeret
- Event Hubs-on keresztüli streamfeldolgozási tapasztalat
- Azure DevOps- és Git-tapasztalat
- Entra ID-ismeret
- RBAC-ismeret
- Power BI-ismeret
- Visual Studio Code-ismeret
- Adatintegrációs és ETL/ELT-folyamatokban szerzett tapasztalat
- Adatelemzési és modellezési tapasztalat
- Az Azure adatkezelési mérnöki tanúsítványok előnyt jelentenek
- A mesterséges intelligenciával és gépi tanulással kapcsolatos projektekben szerzett tapasztalat előnyt jelent
- A DataOps és az adatplatform-automatizálás ismerete előnyt jelent
Juttatások
- Rugalmas munkaidő
- Távmunka
- Személyre szabott karrierfejlesztési terv
- Képzési programok
- Munka multidiszciplináris csapatokban
- Sokszínű globális csapat
- Nagy hatású projektek az iparág vezető ügyfeleivel