
Applaudo je nearshore spoločnosť zaoberajúca sa vývojom softvéru, ktorá pomáha organizáciám modernizovať technológie a napredovať v digitálnej transformácii. Spoločnosť bola založená v roku 2013 a spája odborné znalosti v oblasti softvérového inžinierstva a poradenstva v oblastiach inovácií a dizajnu používateľských skúseností, vývoja a údržby aplikácií, zabezpečenia kvality, cloudových riešení, umelej inteligencie, kybernetickej bezpečnosti, dátových riešení a modernizácie aplikácií. Applaudo poskytuje služby klientom z odvetví vrátane športu, médií a zábavy, maloobchodu, spotrebného baleného tovaru a finančných služieb a podporuje projekty, ktoré zlepšujú digitálne produkty, infraštruktúru a poskytovanie IT služieb. So sídlom v Austine v Texase a pobočkou v San Salvadore spája Applaudo tím 501 až 1 000 zamestnancov, ktorí poskytujú služby firmám v oblasti technológií a digitálnych služieb.
Senior dátový inžinier pre Azure Databricks
Tvorba dátových pipeline v Azure Databricks a Pythone pre podnikové riešenia Applaudo založené na umelej inteligencii. Prepájanie podnikových zdrojov so spoľahlivými dátovými skladmi a centralizovaným dátovým centrom.
Popis
- Vytvárať a udržiavať produkčné dátové pipeline pomocou Azure Databricks a Pythonu.
- Navrhovať škálovateľné dátové transformácie v PySparku alebo Spark SQL.
- Získavať a spracúvať dáta z rozhraní API, relačných databáz, cloudových úložísk a SFTP.
- Zjednocovať dáta z ticketovacích, CRM, marketingových, maloobchodných a ďalších podnikových platforiem v centralizovanom dátovom centre.
- Vyvíjať a udržiavať štruktúry dátových skladov, dimenzionálne modely a dátové trhy.
- Písať, optimalizovať a udržiavať SQL transformácie.
- Pridávať kontroly kvality a konzistentnosti dát.
- Vytvárať a udržiavať výstupné dátové toky pre systémy tretích strán.
- Vyšetrovať nezrovnalosti v dátach a riešiť problémy s pipeline.
- Dokumentovať pipeline, logiku transformácií, závislosti a technické postupy.
- Spolupracovať s kolegami a zainteresovanými stranami na objasňovaní potrieb, upozorňovaní na riziká a dodávaní spoľahlivých dátových riešení.
- Včas informovať o pokroku, prekážkach a možných oneskoreniach a navrhovať ďalšie kroky.
Požiadavky
- Aspoň päť rokov odbornej praxe v dátovom inžinierstve.
- Rozsiahle praktické skúsenosti s Azure Databricks.
- Pokročilé znalosti Pythonu na spracovanie a transformáciu dát a vývoj pipeline.
- Dobrá znalosť Apache Sparku vrátane PySparku a/alebo Spark SQL.
- Pokročilé znalosti SQL vrátane komplexných transformácií, validácie dát a optimalizácie výkonu dotazov.
- Dobrá znalosť dátových skladov a dimenzionálneho modelovania vrátane faktov, dimenzií a dátových trhov.
- Skúsenosti s pripájaním rozhraní REST API, relačných databáz, cloudových úložísk a SFTP.
- Praktické skúsenosti s dátovými službami Microsoft Azure.
- Skúsenosti so zavádzaním kontrol kvality dát a overovaním konzistentnosti medzi zdrojovými systémami a cieľovými modelmi.
- Schopnosť diagnostikovať zlyhania pipeline a vyšetrovať nezrovnalosti v dátach.
- Schopnosť pracovať samostatne, preberať zodpovednosť a dodržiavať inžinierske a dokumentačné postupy.
- Dobré komunikačné schopnosti v angličtine.
- Schopnosť efektívne spolupracovať s tímom so sídlom v USA.
- Výhodou sú skúsenosti s migráciou SQL úloh do Azure Databricks.
Benefity
- Práca na diaľku.
- Možnosť rýchlo sa učiť a preberať zodpovednosť.
- Spolupráca so skúsenými tímami.
- Investície do moderných spôsobov práce.
- Účasť na rozsiahlej transformácii postavenej na umelej inteligencii.
Súvisiace pracovné ponuky
Nenašli sa žiadne pracovné ponuky
Skúste upraviť alebo vymazať filtre a nájsť ďalšie príležitosti.