
Applaudo je nearshoreová společnost zabývající se vývojem softwaru, která pomáhá organizacím modernizovat technologie a rozvíjet digitální transformaci. Společnost byla založena v roce 2013 a propojuje odborné znalosti v oblasti softwarového inženýrství a poradenství v oblastech inovací a návrhu uživatelské zkušenosti, vývoje a údržby aplikací, zajišťování kvality, cloudových řešení, umělé inteligence, kybernetické bezpečnosti, datových řešení a modernizace aplikací. Applaudo poskytuje služby klientům v odvětvích, jako jsou sport, média a zábava, maloobchod, spotřební zboží a finanční služby, a podporuje projekty zaměřené na zlepšování digitálních produktů, infrastruktury a poskytování IT služeb. Centrála společnosti se nachází v texaském Austinu a kancelář v San Salvadoru. Applaudo sdružuje tým o velikosti 501 až 1 000 zaměstnanců, který poskytuje služby firmám v oblasti technologií a digitálních služeb.
Seniorní datový inženýr Azure Databricks
Vytvářejte datové pipeline v Azure Databricks a Pythonu pro podniková řešení Applaudo využívající AI. Propojujte podnikové zdroje se spolehlivými datovými sklady a centrálním Data Hubem.
Popis
- Vytvářejte a udržujte produkční datové pipeline pomocí Azure Databricks a Pythonu.
- Navrhujte škálovatelné transformace dat s využitím PySpark nebo Spark SQL.
- Načítejte a zpracovávejte data z API, relačních databází, cloudových úložišť a SFTP.
- Propojujte data ze systémů pro správu tiketů, CRM, marketingu, maloobchodu a dalších podnikových platforem v centrálním Data Hubu.
- Vyvíjejte a udržujte struktury datových skladů, dimenzionální modely a datová tržiště.
- Pište, optimalizujte a udržujte SQL transformace.
- Přidávejte validace kvality dat a kontroly konzistence.
- Vytvářejte a udržujte odchozí datové toky pro systémy třetích stran.
- Prověřujte nesrovnalosti v datech a řešte problémy s pipeline.
- Dokumentujte pipeline, logiku transformací, závislosti a technické procesy.
- Spolupracujte s kolegy a zainteresovanými stranami na upřesnění potřeb, odhalování rizik a dodávání spolehlivých datových řešení.
- Včas informujte o postupu, překážkách a možných zpožděních a navrhujte další kroky.
Požadavky
- Alespoň pět let odborné praxe v datovém inženýrství.
- Rozsáhlé praktické zkušenosti s Azure Databricks.
- Pokročilá znalost Pythonu pro zpracování a transformaci dat a vývoj pipeline.
- Dobré zkušenosti s Apache Spark, včetně PySpark a/nebo Spark SQL.
- Pokročilá znalost SQL, včetně složitých transformací, validace dat a optimalizace výkonu dotazů.
- Dobré základy datových skladů a dimenzionálního modelování, včetně faktů, dimenzí a datových tržišť.
- Zkušenosti s připojováním REST API, relačních databází, cloudových úložišť a SFTP.
- Praktické zkušenosti s datovými službami Microsoft Azure.
- Zkušenosti s přidáváním kontrol kvality dat a ověřováním konzistence mezi zdrojovými systémy a cílovými modely.
- Schopnost diagnostikovat selhání pipeline a prověřovat nesrovnalosti v datech.
- Schopnost pracovat samostatně, převzít odpovědnost a dodržovat inženýrské postupy a zásady dokumentace.
- Dobrá komunikativní znalost angličtiny.
- Schopnost efektivně spolupracovat s týmem se sídlem v USA.
- Zkušenosti s migrací úloh SQL do Azure Databricks jsou výhodou.
Benefity
- Práce na dálku.
- Možnost rychle se učit a přebírat odpovědnost.
- Spolupráce se silnými týmy.
- Investice do moderních způsobů práce.
- Účast na rozsáhlé transformaci využívající AI.
Související pracovní nabídky
Nebyly nalezeny žádné pracovní nabídky
Zkuste upravit nebo vymazat filtry a najít další příležitosti.