1 001 – 5 000 Сотрудники
Спонсор визы квалифицированного работникаАналитикаИскусственный интеллектКонсалтингSDG Group — международная консалтинговая компания, специализирующаяся на работе с данными, аналитике и искусственном интеллекте. Основанная в 1994 году, она помогает организациям превращать сложные данные в практические бизнес-инсайты, сочетая экспертизу в области процессов с передовыми технологиями и аналитическими платформами ведущих поставщиков программного обеспечения. Более 2 000 консультантов SDG Group работают в разных странах и поддерживают клиентов в реализации преобразований и инноваций на основе данных. Карьерные возможности компании включают личное и профессиональное развитие в рамках гибкой модели работы, направленной на поддержание баланса между работой и личной жизнью.
Старший консультант по инженерии данных на Databricks
Руководите разработкой решений по инженерии данных для клиентов SDG Group: создавайте масштабируемые решения на Databricks и оптимизируйте SQL-преобразования. Определяйте технический подход, наставляйте коллег и помогайте клиентам связывать облачные платформы данных с бизнес-результатами.
Описание
- Разрабатывайте и поддерживайте масштабируемые решения для работы с данными на Databricks: от проектирования и тестирования до текущего сопровождения.
- Улучшайте сложные SQL-запросы и логику преобразований, устраняя неполадки и повышая производительность.
- Руководите направлениями работ по инженерии данных и принимайте обоснованные технические решения.
- Объединяйте структурированные и неструктурированные источники данных с помощью методов ETL/ELT и инструментов интеграции.
- Проектируйте и проверяйте масштабируемые модели данных и структуры хранилищ для отчетности, аналитики, ИИ и последующего использования.
- Участвуйте в проектировании архитектуры и модернизации облачных платформ данных.
- Внедряйте высокие стандарты разработки, тестирования, документирования, развертывания, удобства сопровождения и управления данными.
- Устраняйте проблемы качества данных, надежности, масштабируемости и производительности запросов или конвейеров, а также повышайте эти показатели.
- Работайте с представителями клиента, чтобы уточнять потребности, объяснять компромиссы, рекомендовать решения, согласовывать технические ожидания и связывать инженерные решения с бизнес-результатами.
- Координируйте работу междисциплинарных команд, проверяйте технические решения, делитесь практиками и наставляйте младших инженеров и консультантов.
- Следите за новыми возможностями Databricks, методами инженерии данных и отраслевыми практиками.
- Делитесь опытом и обеспечивайте техническое лидерство в сообществе SDG.
Требования
- Около 5–7 лет опыта или больше в инженерии данных, хранилищах данных, интеграции данных, аналитической инженерии или смежной технической области.
- Подтвержденный опыт самостоятельного руководства сложными техническими проектами.
- Обширный практический опыт работы с Databricks, включая производственные задачи инженерии данных и аналитики.
- Продвинутый уровень владения Databricks SQL.
- Продвинутые навыки SQL: объединения, CTE, оконные функции, агрегирование, сложные преобразования, оптимизация производительности и проверка данных.
- Уверенное владение Python или другим подходящим языком программирования или скриптовым языком.
- Глубокое понимание конвейеров данных, ETL/ELT, интеграции, хранилищ, шаблонов преобразования и практик инженерии данных для производственных сред.
- Понимание размерного моделирования и современных концепций моделирования данных.
- Значительный опыт работы с современными облачными средами и корпоративными платформами данных.
- Опыт работы с современными инструментами инженерии данных, оркестрации или преобразования данных.
- Руководство проверкой данных, сверкой, устранением неполадок и оптимизацией производительности в нескольких исходных и целевых системах.
- Взвешенное аналитическое и архитектурное суждение.
- Умение ясно общаться устно и письменно.
- Умение вести технические обсуждения, влиять на заинтересованные стороны, понятно объяснять сложные темы и завоевывать доверие клиентов.
- Наставничество коллег и стремление развивать технические и консультационные навыки.
- Опыт работы в консалтинге или непосредственно с клиентами будет существенным преимуществом.
- Опыт работы с Matillion и/или dbt будет особенно ценен.
- Приветствуется опыт работы с Databricks SQL Warehouses, Delta Lake или Delta Tables, Databricks Workflows, Unity Catalog, Snowflake, PySpark, а также крупномасштабной корпоративной миграцией или модернизацией данных.
- Приветствуется опыт работы в фармацевтике, медико-биологических науках, здравоохранении или другой строго регулируемой отрасли.
Преимущества
- Полная занятость в растущем секторе высоких технологий.
- Культура, основанная на заслугах и поддерживающая карьерное развитие и профессиональный рост.
- Конкурентная оплата труда.
- Пенсионный план 401(k) с софинансированием работодателя.
- Медицинское, стоматологическое страхование, страхование зрения и страхование на случай нетрудоспособности.
- Не менее трех недель оплачиваемого отпуска.
- Гибкий график праздничных выходных.
- Гибридный формат работы, сочетающий работу на площадке и удаленно.
- Постоянное обучение и работа с современными технологиями обработки данных, аналитики и ИИ.
- Командная рабочая среда с опытными специалистами.
- Содержательные проекты для клиентов.