CONVOTIS — глобальный стратегический IT-партнёр, который помогает компаниям модернизировать операционные процессы и повышать эффективность. Компания предоставляет услуги в направлениях Business IT, Platform IT и Managed IT, включая бизнес-приложения, решения для цифровых платформ и комплексное управление IT-инфраструктурой. Около 1 000 сотрудников в 23 офисах девяти стран поддерживают B2B- и SaaS-организации, выстраивая гибкие долгосрочные партнёрства и обеспечивая круглосуточную IT-поддержку.
Инженер по данным, мастер-данные и эталонные записи — удалённая работа в Испании
Роль инженера по данным, связанная с интеграцией и консолидацией мастер-данных для CONVOTIS Iberia, технологической компании в сфере решений. Создание эталонных записей с использованием Airflow, dbt, Python и SQL.
Описание
- Проектировать и разрабатывать DAG-объекты Airflow для интеграции данных из внутренних и внешних API
- Собирать информацию из нескольких источников, преобразовывать и проверять её, а затем загружать в корпоративные системы мастер-данных
- Разрабатывать и улучшать процессы сопоставления, дедупликации, консолидации и формирования эталонных записей
- Управлять процессом проверки изменений, обеспечивая их прослеживаемость, контроль и единообразное применение
- Определять механизмы контроля качества данных, бизнес-правила и средства наблюдаемости для выявления проблем
- Исследовать расхождения между источниками и работать с бизнес- и дата-командами для определения достоверной информации
- Документировать интеграции, правила и принятые решения для поддержки решений и сохранения знаний команды
Требования
- Около четырёх лет опыта в инженерии данных, интеграциях или работе с мастер-данными; меньший опыт также может рассматриваться при сопоставимом уровне самостоятельности, ответственности и влияния
- Уверенное владение Python, dbt и SQL
- Опыт разработки и поддержки DAG-объектов Airflow в продуктивных средах
- Опыт работы с API, включая аутентификацию, пагинацию, обработку ошибок, повторные попытки и прослеживаемость
- Знание моделирования данных, нормализации, дедупликации, сопоставления и консолидации сущностей
- Аналитические навыки для отслеживания происхождения данных, сравнения источников и преобразования бизнес-правил в техническую логику
- Знание хороших практик Git, тестирования, документирования, наблюдаемости и CI/CD
Преимущества
- Гибкий график работы
- Возможность работать из офиса или дома
- Медицинская страховка
- Гибкая система компенсации
- Внутренние мероприятия
- Активности на открытом воздухе
- Дни отдыха
- Игры в падел
- Отпуск по принципу свободного выбора
- Возможности обучения
- Занятия английским языком
- Сертификации
- Кофе, сладости и настольный футбол в офисе