Avanade podjetjem zagotavlja oblačna orodja za upravljanje povezav in digitalno povezovanje. Njegova platforma podpira krajšanje URL-jev, povezave z blagovno znamko, kode QR, vključno z dinamičnimi formati in formati GS1 Digital Link, mobilne ciljne strani, digitalne vizitke, sledenje kampanjam UTM, analitiko povezav, API-je in integracije. Te zmogljivosti marketinškim ekipam, razvijalcem in ekipam za podporo strankam pomagajo ustvarjati, upravljati in meriti interakcije s strankami prek digitalnih kanalov, pri tem pa zagotavljajo varnostne funkcije in funkcije za skladnost, namenjene podjetjem.
Konzultant za podatkovno inženirstvo – Databricks in Azure (delo na lokaciji v Melbournu)
Ustvarjajte razširljive podatkovne cevovode v okolju Azure in transformacije PySpark z uporabo Databricksa. Podpirajte analitične programe in programe podatkovne znanosti v finančnih storitvah.
Opis
- Ustvarjajte in izboljšujte razširljive cevovode za zajem podatkov z uporabo Azure Data Factory, Databricks in Apache Spark
- Razvijajte in vzdržujte zvezke PySpark za pripravo, preoblikovanje in obogatitev podatkov v podporo pobudam podatkovne znanosti
- Sodelujte s podatkovnimi znanstveniki pri razjasnjevanju zahtev in pravočasni dostavi zanesljivih, strukturiranih podatkovnih nizov
- Vzpostavljajte nadzor kakovosti podatkov, pravila preverjanja in procese spremljanja
- Povezujte in obdelujte strukturirane, polstrukturirane in nestrukturirane vire podatkov
- Uporabljajte standarde varnosti, upravljanja in bančne skladnosti pri podatkovnih rešitvah
- Prilagajajte delovne obremenitve Azure Spark za izboljšanje zmogljivosti in nadzor stroškov
- Sodelujte pri pregledih kode, sejah načrtovanja rešitev in agilnih ceremonijah
- Vzdržujte dokumentacijo o cevovodih, delovnih tokovih in tehničnih odločitvah
Zahteve
- Imate vsaj tri leta praktičnih izkušenj z Azure Databricks
- Izkažite dobro poznavanje Apache Spark, zlasti PySpark za porazdeljeno obdelavo
- Imate izkušnje z Azure Data Factory, Azure Synapse, Azure Blob Storage in Delta Lake
- Razumete delovne tokove ETL/ELT, modeliranje podatkov in načela podatkovnih skladišč
- Za obdelavo podatkov uporabljate Python in/ali Scalo
- Izkušnje z delovnimi tokovi CI/CD z uporabo Azure DevOps, Gita in Terraform so prednost
- Poznate SQL, NoSQL in arhitekture podatkovnih jezer
- Razumete prakse upravljanja podatkov, varnosti in skladnosti v finančnih storitvah
- Uporabljate dobre analitične sposobnosti in sposobnosti reševanja problemov
- Učinkovito komunicirate z deležniki
- Produktivno sodelujete v medfunkcijskih ekipah
- Imate agilno miselnost in izkušnje s Scrumom ali podobnimi okolji
- Imate avstralsko državljanstvo
- Upravičeni ste do pridobitve varnostnega dovoljenja
- Diploma ali magisterij iz računalništva, informacijskih sistemov, inženirstva ali sorodnega področja je prednost
- Certifikat Databricks Certified Data Engineer Associate ali Professional je prednost
- Izkušnje v bančništvu ali finančnih storitvah so zelo zaželene