Avanade
Avanade
Avanade poskytuje cloudové nástroje na správu odkazov a digitálne prepojenie pre firmy. Jeho platforma podporuje skracovanie URL adries, odkazy s vlastnou značkou, QR kódy vrátane dynamických formátov a formátov GS1 Digital Link, mobilné vstupné stránky, digitálne vizitky, sledovanie kampaní UTM, analytiku odkazov, rozhrania API a integrácie. Tieto funkcie pomáhajú marketingovým tímom, vývojárom a tímom zákazníckej podpory vytvárať, spravovať a merať interakcie so zákazníkmi naprieč digitálnymi kanálmi, pričom zahŕňajú bezpečnostné funkcie a funkcie na zabezpečenie súladu s predpismi zamerané na podniky.

Konzultant dátového inžinierstva – Databricks a Azure (práca na mieste v Melbourne)

Vytvárajte škálovateľné dátové pipeline v Azure a transformácie v PySpark pomocou Databricks. Podporujte analytické programy a programy dátovej vedy v oblasti finančných služieb.

Popis

  • Vytvárajte a zlepšujte škálovateľné pipeline na príjem dát pomocou Azure Data Factory, Databricks a Apache Spark
  • Vyvíjajte a udržiavajte notebooky PySpark na prípravu, transformáciu a obohacovanie dát podporujúcich iniciatívy v oblasti dátovej vedy
  • Spolupracujte s dátovými vedcami na objasňovaní požiadaviek a včasnom dodávaní spoľahlivých štruktúrovaných dátových súborov
  • Zavádzajte kontroly kvality dát, validačné pravidlá a monitorovacie procesy
  • Prepájajte a spracúvajte štruktúrované, pološtruktúrované a neštruktúrované zdroje dát
  • Uplatňujte bezpečnostné, riadiace a bankové regulačné štandardy pri dátových riešeniach
  • Optimalizujte úlohy Azure Spark s cieľom zlepšiť výkon a kontrolovať náklady
  • Prispievajte k revíziám kódu, stretnutiam o návrhu riešení a agilným ceremóniám
  • Udržiavajte dokumentáciu k pipeline, pracovným postupom a technickým rozhodnutiam

Požiadavky

  • Prineste aspoň tri roky praktických skúseností s Azure Databricks
  • Preukážte pokročilé znalosti Apache Spark, najmä PySpark na distribuované spracovanie
  • Majte skúsenosti s Azure Data Factory, Azure Synapse, Azure Blob Storage a Delta Lake
  • Rozumejte pracovným postupom ETL/ELT, modelovaniu dát a princípom dátových skladov
  • Používajte Python a/alebo Scalu na spracovanie dát
  • Skúsenosti s pracovnými postupmi CI/CD pomocou Azure DevOps, Gitu a Terraformu sú výhodou
  • Poznajte SQL, NoSQL a architektúry dátových jazier
  • Rozumejte postupom správy dát, bezpečnosti a dodržiavania predpisov vo finančných službách
  • Uplatňujte silné analytické schopnosti a schopnosti riešiť problémy
  • Efektívne komunikujte so zainteresovanými stranami
  • Produktívne spolupracujte v medzifunkčných tímoch
  • Majte agilné zmýšľanie a skúsenosti so Scrumom alebo podobnými prostrediami
  • Buďte austrálskym občanom
  • Buďte oprávnení získať bezpečnostnú previerku
  • Bakalárske alebo magisterské vzdelanie v odbore počítačových vied, informačných systémov, inžinierstva alebo príbuznom odbore je výhodou
  • Certifikácia Databricks Certified Data Engineer Associate alebo Professional je výhodou
  • Skúsenosti z bankovníctva alebo finančných služieb sú veľmi žiaduce