dentsu Austria
dentsu Austria
dentsu Austria — австрийское подразделение международной группы Dentsu, помогающее организациям решать задачи трансформации бизнеса, маркетинга и устойчивого роста. Компания объединяет исследования, аналитику, экспертизу в области медиа и комплексные решения, чтобы помогать брендам ориентироваться на меняющихся рынках и создавать значимый опыт. Как часть международной сети, dentsu Austria объединяет компетенции в сфере маркетинга, медиа и корпоративных сервисов, превращая сложные задачи клиентов, их аудиторий и общества в практические возможности.

Старший технический руководитель AWS по инженерии данных — работа в офисе, Пуна

Руководите проектированием и реализацией масштабируемых платформ данных AWS для корпоративных клиентов. Создавайте защищённые пакетные и потоковые конвейеры с использованием SQL, Python, Spark и автоматизации инфраструктуры.

Описание

  • Проектировать решения AWS для инженерии данных в соответствии с корпоративными стандартами
  • Разрабатывать и оптимизировать пакетные и потоковые конвейеры с использованием нативных технологий AWS и решений с открытым исходным кодом
  • Создавать преобразования SQL и конвейеры Python для аналитических нагрузок
  • Моделировать данные с учётом масштабируемости, производительности и эффективности затрат
  • Управлять работами по инженерии данных от разработки до сопровождения в промышленной среде
  • Повышать производительность, контролировать затраты и планировать ёмкость платформы
  • Диагностировать сложные сбои конвейеров и производственных систем с помощью анализа первопричин
  • Поставлять решения, отвечающие требованиям безопасности, надёжности и масштабируемости
  • Сотрудничать с архитекторами, владельцами продуктов и представителями клиентов
  • Преобразовывать бизнес- и аналитические потребности в надёжные решения для работы с данными в AWS
  • Предоставлять технические оценки, рекомендации по реализации и анализ компромиссов
  • Участвовать в планировании решений и технических проверках архитектуры
  • Применять и совершенствовать стандарты кодирования, документацию и практики инженерии данных
  • Участвовать в проверке кода и работе по непрерывному совершенствованию
  • Обеспечивать соответствие требованиям AWS, безопасности и нормативного регулирования

Требования

  • Иметь 6–10 лет профессионального опыта
  • Обладать глубокими практическими знаниями сервисов AWS для работы с данными, включая Amazon S3, Glue, Athena и Redshift
  • Проектировать облачные архитектуры озёр данных и хранилищ данных AWS
  • Глубоко понимать принципы проектирования пакетных и потоковых конвейеров
  • Создавать масштабируемые и отказоустойчивые процессы загрузки и преобразования данных
  • Использовать продвинутый SQL для преобразований, агрегаций, аналитики и настройки производительности
  • Работать с большими наборами данных в Amazon Redshift и Athena
  • Писать производственный код на Python для приложений инженерии данных
  • Создавать повторно используемые компоненты ETL, утилиты и конвейеры
  • Применять принципы моделирования данных, преобразования и оптимизации производительности
  • Использовать Spark, PySpark или сопоставимые платформы распределённой обработки
  • Работать со структурированными, полуструктурированными и неструктурированными данными
  • Понимать проектирование схем, секционирование и оптимизацию запросов
  • Использовать Terraform и/или CloudFormation для инфраструктуры как кода
  • Создавать и поддерживать конвейеры CI/CD для платформ данных
  • Работать с контейнеризированными нагрузками, такими как Docker и ECS/EKS
  • Отвечать за качество решений, производительность и стабильность в промышленной среде
  • Эффективно взаимодействовать с архитекторами, DevOps, QA и бизнес-заинтересованными сторонами
  • Иметь степень бакалавра или магистра в области компьютерных наук, информационных систем, инженерии данных или смежной дисциплины
  • Иметь сертификат AWS Data Analytics или Solutions Architect, а также любые два из перечисленных сертификатов
  • Сертификаты Databricks, Snowflake или других облачных платформ данных будут преимуществом
  • Быть готовым работать либо с 12:00 до 21:00, либо с 14:00 до 23:00 по индийскому стандартному времени