Avanade предоставя облачни инструменти за управление на връзки и дигитална свързаност за бизнеса. Неговата платформа поддържа съкращаване на URL адреси, брандирани връзки, QR кодове, включително динамични формати и формати GS1 Digital Link, мобилни целеви страници, дигитални визитки, проследяване на UTM кампании, анализ на връзки, API и интеграции. Тези възможности помагат на маркетинговите екипи, разработчиците и екипите за обслужване на клиенти да създават, управляват и измерват взаимодействията с клиентите в различни дигитални канали, с функции за сигурност и съответствие, предназначени за предприятия.
Консултант по инженеринг на данни – Databricks и Azure (работа на място в Мелбърн)
Изграждайте мащабируеми конвейери за данни в Azure и трансформации с PySpark чрез Databricks. Подпомагайте аналитични програми и инициативи за наука за данните във финансовия сектор.
Описание
- Създавайте и подобрявайте мащабируеми конвейери за приемане на данни с Azure Data Factory, Databricks и Apache Spark
- Разработвайте и поддържайте PySpark notebooks за подготовка, трансформация и обогатяване на данни в подкрепа на инициативи за наука за данните
- Партнирайте си с учени по данните, за да изяснявате изискванията и да доставяте надеждни, структурирани набори от данни навреме
- Въвеждайте контроли за качеството на данните, правила за валидиране и процеси за мониторинг
- Свързвайте и обработвайте структурирани, полуструктурирани и неструктурирани източници на данни
- Прилагайте стандарти за сигурност, управление и банково съответствие към решенията за данни
- Оптимизирайте работните натоварвания на Azure Spark за подобряване на производителността и контрол на разходите
- Участвайте в прегледи на код, сесии за проектиране на решения и гъвкави церемонии
- Поддържайте документация за конвейерите, работните процеси и техническите решения
Изисквания
- Имате поне три години практически опит с Azure Databricks
- Демонстрирайте задълбочени познания по Apache Spark, особено PySpark за разпределена обработка
- Имате опит с Azure Data Factory, Azure Synapse, Azure Blob Storage и Delta Lake
- Разбирате ETL/ELT работните процеси, моделирането на данни и принципите на складовете за данни
- Използвате Python и/или Scala за обработка на данни
- Опитът с CI/CD работни процеси чрез Azure DevOps, Git и Terraform е предимство
- Познавате SQL, NoSQL и архитектурите на езерата от данни
- Разбирате практиките за управление на данни, сигурност и съответствие във финансовите услуги
- Прилагате силни аналитични умения и умения за решаване на проблеми
- Комуникирате ефективно със заинтересованите страни
- Работите продуктивно в междуфункционални екипи
- Имате гъвкаво мислене и опит със Scrum или подобни среди
- Притежавате австралийско гражданство
- Имате право да получите разрешение за достъп до класифицирана информация
- Бакалавърска или магистърска степен по компютърни науки, информационни системи, инженерство или сродна област е предимство
- Сертификатът Databricks Certified Data Engineer Associate или Professional е предимство
- Опитът в банковия или финансовия сектор е силно желателен