inventYOU IT Consulting
inventYOU IT Consulting
inventYOU IT Consulting — шведская ИТ-консалтинговая компания, основанная в 2017 году. Она предоставляет услуги на площадке клиента и в формате nearshoring для заказчиков — от стартапов до крупных предприятий. Компания разрабатывает ИТ-решения, помогающие достигать бизнес-целей и повышать отдачу от технологических инвестиций. Благодаря расположенной в Афинах nearshoring-операции inventYOU объединяет клиентов с ИТ-специалистами, работающими в том же часовом поясе, при поддержке руководителей проектов, говорящих по-шведски. Подход компании основан на гибкой реализации проектов, целенаправленном партнерстве, позитивном рабочем настрое и измеримой бизнес-ценности в рамках консультационных проектов.

Ведущий инженер по данным — Azure и Databricks (гибридный формат, Афины)

Ведущий инженер по данным отвечает за масштабируемые конвейеры Azure и Databricks, а также продукты Lakehouse. Роль предусматривает работу с качеством данных, управлением, безопасностью и производительностью в inventYOU.

Описание

  • Проектировать и поддерживать производственные конвейеры данных с помощью Azure Data Factory и Azure Databricks
  • Создавать и оптимизировать решения на базе Azure SQL, Data Lake и Lakehouse
  • Создавать повторно используемые продукты данных и модели данных
  • Внедрять контроль качества данных, мониторинг и операционную поддержку
  • Разрабатывать и совершенствовать решения для работы с данными на PySpark и Spark SQL
  • Использовать Delta Lake и Unity Catalog в решениях для инженерии данных
  • Применять методы обеспечения безопасности, контроля доступа, управления данными и производительности
  • Сотрудничать с командами аналитики, архитектуры, управления данными, безопасности и инженерии
  • Поддерживать поставку решений с помощью Git, DevOps, автоматизированного тестирования и CI/CD

Требования

  • Не менее пяти лет соответствующего профессионального опыта
  • Глубокий практический опыт работы с Azure Data Factory
  • Глубокий практический опыт работы с Azure Databricks
  • Профессиональный опыт работы с Azure SQL
  • Продвинутые знания PySpark и Spark SQL
  • Опыт использования Delta Lake
  • Высокий уровень навыков моделирования данных
  • Опыт управления качеством данных
  • Опыт работы в Agile-средах
  • Практический опыт работы с Git, DevOps и конвейерами CI/CD
  • Профессиональное владение греческим и английским языками
  • Опыт работы с Power BI
  • Опыт работы с Collibra и Soda
  • Опыт работы с Delta Live Tables и связанными инструментами Lakehouse
  • Опыт работы с Delta Live Tables

Преимущества

  • Работа с Azure, Databricks, PySpark и современными технологиями Lakehouse
  • Создание корпоративных решений для работы с данными и повторно используемых продуктов данных
  • Сотрудничество с опытными специалистами по данным и технологиям
  • Дальнейшее развитие компетенций в современной инженерии облачных данных