
inventYOU IT Consulting — шведская ИТ-консалтинговая компания, основанная в 2017 году. Она предоставляет услуги на площадке клиента и в формате nearshoring для заказчиков — от стартапов до крупных предприятий. Компания разрабатывает ИТ-решения, помогающие достигать бизнес-целей и повышать отдачу от технологических инвестиций. Благодаря расположенной в Афинах nearshoring-операции inventYOU объединяет клиентов с ИТ-специалистами, работающими в том же часовом поясе, при поддержке руководителей проектов, говорящих по-шведски. Подход компании основан на гибкой реализации проектов, целенаправленном партнерстве, позитивном рабочем настрое и измеримой бизнес-ценности в рамках консультационных проектов.
Ведущий инженер по данным — Azure и Databricks (гибридный формат, Афины)
Ведущий инженер по данным отвечает за масштабируемые конвейеры Azure и Databricks, а также продукты Lakehouse. Роль предусматривает работу с качеством данных, управлением, безопасностью и производительностью в inventYOU.
Описание
- Проектировать и поддерживать производственные конвейеры данных с помощью Azure Data Factory и Azure Databricks
- Создавать и оптимизировать решения на базе Azure SQL, Data Lake и Lakehouse
- Создавать повторно используемые продукты данных и модели данных
- Внедрять контроль качества данных, мониторинг и операционную поддержку
- Разрабатывать и совершенствовать решения для работы с данными на PySpark и Spark SQL
- Использовать Delta Lake и Unity Catalog в решениях для инженерии данных
- Применять методы обеспечения безопасности, контроля доступа, управления данными и производительности
- Сотрудничать с командами аналитики, архитектуры, управления данными, безопасности и инженерии
- Поддерживать поставку решений с помощью Git, DevOps, автоматизированного тестирования и CI/CD
Требования
- Не менее пяти лет соответствующего профессионального опыта
- Глубокий практический опыт работы с Azure Data Factory
- Глубокий практический опыт работы с Azure Databricks
- Профессиональный опыт работы с Azure SQL
- Продвинутые знания PySpark и Spark SQL
- Опыт использования Delta Lake
- Высокий уровень навыков моделирования данных
- Опыт управления качеством данных
- Опыт работы в Agile-средах
- Практический опыт работы с Git, DevOps и конвейерами CI/CD
- Профессиональное владение греческим и английским языками
- Опыт работы с Power BI
- Опыт работы с Collibra и Soda
- Опыт работы с Delta Live Tables и связанными инструментами Lakehouse
- Опыт работы с Delta Live Tables
Преимущества
- Работа с Azure, Databricks, PySpark и современными технологиями Lakehouse
- Создание корпоративных решений для работы с данными и повторно используемых продуктов данных
- Сотрудничество с опытными специалистами по данным и технологиям
- Дальнейшее развитие компетенций в современной инженерии облачных данных