
Applaudo je nearshoreová společnost zabývající se vývojem softwaru, která pomáhá organizacím modernizovat technologie a rozvíjet digitální transformaci. Společnost byla založena v roce 2013 a propojuje odborné znalosti v oblasti softwarového inženýrství a poradenství v oblastech inovací a návrhu uživatelské zkušenosti, vývoje a údržby aplikací, zajišťování kvality, cloudových řešení, umělé inteligence, kybernetické bezpečnosti, datových řešení a modernizace aplikací. Applaudo poskytuje služby klientům v odvětvích, jako jsou sport, média a zábava, maloobchod, spotřební zboží a finanční služby, a podporuje projekty zaměřené na zlepšování digitálních produktů, infrastruktury a poskytování IT služeb. Centrála společnosti se nachází v texaském Austinu a kancelář v San Salvadoru. Applaudo sdružuje tým o velikosti 501 až 1 000 zaměstnanců, který poskytuje služby firmám v oblasti technologií a digitálních služeb.
Seniorní datový inženýr Azure Databricks
Vytvářejte datové pipeline v Azure Databricks a Pythonu pro podniková řešení Applaudo využívající AI. Propojujte firemní data do škálovatelných a spolehlivých datových center a skladů.
Popis
- Vytvářet a udržovat datové pipeline připravené pro produkční provoz pomocí Azure Databricks a Pythonu.
- Vytvářet škálovatelné transformace pomocí PySpark nebo Spark SQL.
- Přijímat a zpracovávat data z API, relačních databází, cloudových úložišť a SFTP.
- Propojovat systémy pro správu požadavků, CRM, marketingové a maloobchodní platformy i další podnikové platformy s centralizovaným datovým centrem.
- Vyvíjet a udržovat struktury datových skladů, dimenzionální modely a datová tržiště.
- Vytvářet, ladit a udržovat SQL transformace.
- Přidávat kontroly kvality a konzistence dat.
- Vytvářet a udržovat výstupní datové kanály pro systémy třetích stran.
- Prověřovat nesrovnalosti v datech a řešit problémy s pipeline.
- Dokumentovat pipeline, logiku transformací, závislosti a technické procesy.
- Spolupracovat s kolegy a zainteresovanými stranami na upřesňování požadavků a identifikaci rizik.
- Včas informovat o postupu, překážkách a možných zpožděních a navrhovat kroky k dodržení termínů.
Požadavky
- Alespoň pět let odborných zkušeností v oblasti datového inženýrství.
- Rozsáhlé praktické zkušenosti s Azure Databricks.
- Pokročilé znalosti Pythonu pro zpracování a transformaci dat a vývoj pipeline.
- Solidní zkušenosti s Apache Spark, včetně PySpark a/nebo Spark SQL.
- Pokročilá znalost SQL, včetně složitých transformací, validace dat a ladění výkonu dotazů.
- Dobrá znalost datových skladů a dimenzionálního modelování včetně faktů, dimenzí a datových tržišť.
- Zkušenosti s integrací dat z REST API, relačních databází, cloudových úložišť a SFTP.
- Praktické zkušenosti s datovými službami Microsoft Azure pro příjem, ukládání, zpracování a integraci dat.
- Zkušenosti se zaváděním kontrol kvality dat a ověřováním konzistence mezi zdrojovými systémy a cílovými datovými modely.
- Schopnost diagnostikovat selhání pipeline, prověřovat nesrovnalosti v datech a zavádět spolehlivé opravy.
- Silné analytické schopnosti, schopnost řešit problémy a organizovat práci.
- Schopnost pracovat samostatně, převzít odpovědnost a dodržovat inženýrské postupy i standardy dokumentace.
- Dobrá znalost angličtiny a schopnost spolupracovat s týmem se sídlem v USA.
- Zkušenosti s migrací úloh založených na SQL do Azure Databricks jsou výhodou.
Benefity
- Možnost práce na dálku.
- Příležitosti k rychlému učení a práci se silnými týmy.
- Moderní pracovní postupy.
- Možnost přispět k rozsáhlé transformaci využívající AI.
Související pracovní nabídky
Nebyly nalezeny žádné pracovní nabídky
Zkuste upravit nebo vymazat filtry a najít další příležitosti.