
dentsu Austria — австрийское подразделение международной группы Dentsu, помогающее организациям решать задачи трансформации бизнеса, маркетинга и устойчивого роста. Компания объединяет исследования, аналитику, экспертизу в области медиа и комплексные решения, чтобы помогать брендам ориентироваться на меняющихся рынках и создавать значимый опыт. Как часть международной сети, dentsu Austria объединяет компетенции в сфере маркетинга, медиа и корпоративных сервисов, превращая сложные задачи клиентов, их аудиторий и общества в практические возможности.
Старший технический руководитель AWS по инженерии данных — работа в офисе, Пуна
Руководите проектированием и реализацией масштабируемых платформ данных AWS для корпоративных клиентов. Создавайте защищённые пакетные и потоковые конвейеры с использованием SQL, Python, Spark и автоматизации инфраструктуры.
Описание
- Проектировать решения AWS для инженерии данных в соответствии с корпоративными стандартами
- Разрабатывать и оптимизировать пакетные и потоковые конвейеры с использованием нативных технологий AWS и решений с открытым исходным кодом
- Создавать преобразования SQL и конвейеры Python для аналитических нагрузок
- Моделировать данные с учётом масштабируемости, производительности и эффективности затрат
- Управлять работами по инженерии данных от разработки до сопровождения в промышленной среде
- Повышать производительность, контролировать затраты и планировать ёмкость платформы
- Диагностировать сложные сбои конвейеров и производственных систем с помощью анализа первопричин
- Поставлять решения, отвечающие требованиям безопасности, надёжности и масштабируемости
- Сотрудничать с архитекторами, владельцами продуктов и представителями клиентов
- Преобразовывать бизнес- и аналитические потребности в надёжные решения для работы с данными в AWS
- Предоставлять технические оценки, рекомендации по реализации и анализ компромиссов
- Участвовать в планировании решений и технических проверках архитектуры
- Применять и совершенствовать стандарты кодирования, документацию и практики инженерии данных
- Участвовать в проверке кода и работе по непрерывному совершенствованию
- Обеспечивать соответствие требованиям AWS, безопасности и нормативного регулирования
Требования
- Иметь 6–10 лет профессионального опыта
- Обладать глубокими практическими знаниями сервисов AWS для работы с данными, включая Amazon S3, Glue, Athena и Redshift
- Проектировать облачные архитектуры озёр данных и хранилищ данных AWS
- Глубоко понимать принципы проектирования пакетных и потоковых конвейеров
- Создавать масштабируемые и отказоустойчивые процессы загрузки и преобразования данных
- Использовать продвинутый SQL для преобразований, агрегаций, аналитики и настройки производительности
- Работать с большими наборами данных в Amazon Redshift и Athena
- Писать производственный код на Python для приложений инженерии данных
- Создавать повторно используемые компоненты ETL, утилиты и конвейеры
- Применять принципы моделирования данных, преобразования и оптимизации производительности
- Использовать Spark, PySpark или сопоставимые платформы распределённой обработки
- Работать со структурированными, полуструктурированными и неструктурированными данными
- Понимать проектирование схем, секционирование и оптимизацию запросов
- Использовать Terraform и/или CloudFormation для инфраструктуры как кода
- Создавать и поддерживать конвейеры CI/CD для платформ данных
- Работать с контейнеризированными нагрузками, такими как Docker и ECS/EKS
- Отвечать за качество решений, производительность и стабильность в промышленной среде
- Эффективно взаимодействовать с архитекторами, DevOps, QA и бизнес-заинтересованными сторонами
- Иметь степень бакалавра или магистра в области компьютерных наук, информационных систем, инженерии данных или смежной дисциплины
- Иметь сертификат AWS Data Analytics или Solutions Architect, а также любые два из перечисленных сертификатов
- Сертификаты Databricks, Snowflake или других облачных платформ данных будут преимуществом
- Быть готовым работать либо с 12:00 до 21:00, либо с 14:00 до 23:00 по индийскому стандартному времени