Derevo je spoločnosť zameraná na dátovú analytiku a digitálnu transformáciu, ktorá pomáha organizáciám premieňať údaje na obchodné poznatky. Jej činnosť pokrýva celý analytický cyklus od tvorby a integrácie údajov až po ich analýzu a zdieľanie a zahŕňa aj budovanie kultúry založenej na dátach. V analytických riešeniach naprieč odvetviami využíva umelú inteligenciu a strojové učenie a uplatňuje model nearshore spolupráce s globálnymi tímami, pričom sa zameriava najmä na klientov v Spojených štátoch a Kanade. Derevo má viac než desaťročné skúsenosti a spolupracuje s technologickými poskytovateľmi, aby podporila organizácie pri zmene založenej na dátach. Jej tímy pôsobia v oblastiach poradenstva, logistiky a marketingu a spoločnosť prijíma zamestnancov naprieč celou organizáciou.
Senior dátový inžinier, Microsoft Fabric
Navrhujte architektúry Microsoft Fabric, lakehouse riešenia a dátové pipeline pre dátové a AI riešenia spoločnosti Derevo. Premieňajte rozsiahle dáta na poznatky, ktoré podporujú obchodné rozhodnutia.
Popis
- Navrhovať a implementovať kvalitné moderné dátové architektúry
- Vyvíjať analytické riešenia pomocou technológií Big Data
- Navrhovať, udržiavať a optimalizovať systémy paralelného spracovania
- Uplatňovať osvedčené postupy pri ukladaní a správe dátových skladov, dátových jazier a lakehouse riešení
- Zhromažďovať, spracúvať, čistiť a orchestrávať veľké objemy dát
- Integrovať a transformovať dáta z viacerých štruktúrovaných a čiastočne štruktúrovaných zdrojov
- Definovať technické stratégie v súlade s obchodnými cieľmi
- Zapájať sa do projektu a jeho sprintov a vykonávať vývojové práce
- Identifikovať požiadavky a určovať rozsah
- Zúčastňovať sa plánovania sprintov, technických stretnutí, workshopov a porád s internými tímami a klientmi
- Klasifikovať úlohy a odhadovať ich náročnosť pomocou agilných metodík
- Denne sledovať priebeh sprintu
- Dodržiavať termíny dodania a riadiť riziká včasným oznamovaním oneskorení
Požiadavky
- Pokročilá znalosť angličtiny
- Pokročilé znalosti T-SQL a Spark SQL vrátane DDL, DML, poddotazov, CTE, viacerých spojení, agregácií, okenných funkcií, uložených procedúr, optimalizácie indexov, štatistík a plánov vykonávania
- Pokročilé znalosti Pythonu (PySpark) vrátane objektovo orientovaného programovania, dátových štruktúr, riadiaceho toku, načítavania dát, DataFrame, UDF, časových okien, partitioningu, PEP 8 a modularity
- Skúsenosti s používaním JSON a REST API na orchestráciu pipeline, nasadzovanie CI/CD, dynamickú parametrizáciu a správu artefaktov
- Znalosť Microsoft Fabric, Lakehouse, OneLake, Delta Lake a tabuliek Delta v súlade s ACID
- Znalosť partitioningu, OPTIMIZE, Z-ORDER a cestovania v čase
- Znalosť dátových skladov (Synapse Analytics), vyhradených a serverless SQL klastrov, hviezdicových a snehových vločiek, transakčného T-SQL, izolácie a automatického škálovania
- Skúsenosti s CI/CD a správou životného cyklu pomocou Azure DevOps alebo GitHub Actions
- Znalosť jednotkového testovania datasetov, validácie schém a automatizovaného nasadzovania artefaktov
- Znalosť Monitor Hub a Activator, panelov metrík, proaktívnych upozornení a automatizovaných runbookov
- Znalosť Eventstreams a Eventhouse na príjem udalostí v reálnom čase, spracovanie časových okien a inkrementálne agregácie
- Znalosť zabezpečenia a správy dát, rolí a oprávnení, zabezpečenia na úrovni riadkov a stĺpcov, dynamického maskovania dát a auditu
- Všeobecná znalosť Azure Data Factory je výhodou
- Dobré komunikačné schopnosti, tímová práca v rámci tímu Squad, iniciatívnosť, spolupráca, priebežné vzdelávanie, zodpovednosť, organizačné schopnosti, dátové poradenstvo, riadenie požiadaviek, stratégia zameraná na klienta a schopnosť prezentovať klientom
Benefity
- Zákonné a nadštandardné benefity
- Možnosti rozvíjať odborné znalosti v rôznych oblastiach a technológiách
- Rozvoj naprieč odbormi a nové výzvy
- Prostredie, ktoré poskytuje priestor, dôveru a slobodu tvoriť
- Požadované školenia
- Práca na špičkových technologických projektoch pre nadnárodných klientov
- Flexibilná práca na diaľku
- Pracovné vybavenie potrebné na výkon práce
- Nástroje na internú komunikáciu