Derevo je společnost zaměřená na datovou analytiku a digitální transformaci, která pomáhá organizacím proměňovat data v obchodní přehledy. Její práce pokrývá celý životní cyklus analytiky, od vytváření a integrace dat přes jejich analýzu až po sdílení, a zahrnuje také podporu kultury založené na datech. Společnost využívá umělou inteligenci a strojové učení v analytických řešeních napříč odvětvími a pracuje s modelem nearshore dodávek a globálními týmy; zaměřuje se zejména na klienty ve Spojených státech a Kanadě. Díky více než deseti letům zkušeností Derevo spolupracuje s poskytovateli technologií a podporuje organizace při změnách založených na datech. Týmy působí v oblasti poradenství, logistiky a marketingu a společnost nabírá zaměstnance napříč organizací.
Seniorní datový inženýr Microsoft Fabric
Vytvářejte architektury Microsoft Fabric, lakehouse platformy a datové pipeline pro datová a AI řešení společnosti Derevo. Proměňujte rozsáhlá data v poznatky, které podporují obchodní rozhodování.
Popis
- Vytvářejte a implementujte moderní datové architektury vysoké kvality
- Vyvíjejte analytická řešení s využitím technologií Big Data
- Navrhujte, udržujte a optimalizujte systémy paralelního zpracování
- Uplatňujte osvědčené postupy pro ukládání a správu datových skladů, datových jezer a lakehouse platforem
- Shromažďujte, zpracovávejte, čistěte a orchestrujte velké objemy dat
- Integrujte a transformujte data z různých strukturovaných a částečně strukturovaných zdrojů
- Definujte technické strategie v souladu s obchodními cíli
- Zapojte se do projektu a jeho sprintů a pracujte na vývoji
- Identifikujte požadavky a určujte rozsah práce
- Účastněte se plánování sprintů, technických setkání, workshopů a schůzek s interními týmy i klienty
- Klasifikujte a odhadujte úkoly pomocí agilních metodik
- Denně sledujte průběh sprintu
- Dodržujte termíny dodání a řiďte rizika včasným oznamováním zpoždění
Požadavky
- Pokročilá znalost angličtiny
- Pokročilá znalost T-SQL a Spark SQL včetně DDL, DML, poddotazů, CTE, vícenásobných spojení, agregací, okenních funkcí, uložených procedur, optimalizace indexů, statistik a plánů provádění
- Pokročilá znalost Pythonu (PySpark) včetně objektově orientovaného programování, datových struktur, řízení toku, příjmu dat, DataFrame, UDF, časových oken, dělení na oddíly, PEP 8 a modularity
- Zkušenost s používáním JSON a REST API pro orchestraci pipeline, nasazování CI/CD, dynamickou parametrizaci a správu artefaktů
- Znalost Microsoft Fabric, Lakehouse, OneLake, Delta Lake a tabulek Delta splňujících ACID
- Znalost dělení na oddíly, OPTIMIZE, Z-ORDER a Time Travel
- Znalost datových skladů (Synapse Analytics), provisionovaných i bezserverových clusterů SQL, schémat hvězdy a sněhové vločky, transakčního T-SQL, izolace a automatického škálování
- Zkušenost s CI/CD a správou životního cyklu pomocí Azure DevOps nebo GitHub Actions
- Znalost jednotkového testování datasetů, validace schémat a automatizovaného nasazování artefaktů
- Znalost Monitor Hub a Activator, dashboardů metrik, proaktivních upozornění a automatizovaných provozních postupů
- Znalost Eventstreams a Eventhouse pro příjem událostí v reálném čase, časová okna zpracování a přírůstkové agregace
- Znalost zabezpečení a správy dat, rolí a oprávnění, zabezpečení na úrovni řádků a sloupců, dynamického maskování dat a auditování
- Obecná znalost Azure Data Factory je výhodou
- Dobré komunikační dovednosti, týmová spolupráce v rámci Squad, proaktivita, spolupráce, průběžné vzdělávání, odpovědnost, organizovanost, poradenství v oblasti dat, správa požadavků, strategie zaměřená na klienta a prezentování klientům
Benefity
- Zákonné a další benefity
- Možnost rozvíjet odbornost v různých oblastech a technologiích
- Mezioborový rozvoj a nové výzvy
- Prostředí, které nabízí prostor, důvěru a svobodu tvořit
- Potřebné školení
- Práce na špičkových technologických projektech pro mezinárodní klienty
- Flexibilní práce na dálku
- Vybavení potřebné k práci
- Interní komunikační nástroje