knowmad mood — международная компания в сфере цифровой трансформации и технологических услуг, помогающая крупным организациям модернизировать операционные процессы, клиентский опыт и технологические платформы. Компания объединяет консалтинг, разработку программного обеспечения и техническую экспертизу в таких областях, как цифровые каналы и электронная коммерция, UX/UI, мобильные решения, платформы, данные и аналитика, облачная инфраструктура, включая AWS, искусственный интеллект, блокчейн, IoT, DevOps, контроль качества, тестирование, безопасность, архитектура решений, а также Atlassian и управление ИТ. Компания работает с B2B-клиентами в банковской сфере, телекоммуникациях, розничной торговле, здравоохранении, энергетике, автомобильной промышленности и логистике, уделяя особое внимание масштабируемым цифровым решениям и долгосрочной технологической трансформации.
Ведущий инженер по данным — удалённая работа в Испании в knowmad mood
Присоединяйтесь к knowmad mood в роли ведущего инженера по данным и создавайте масштабируемые конвейеры Spark и PySpark в Microsoft Azure. Вы будете разрабатывать управляемые и готовые к эксплуатации решения для работы с данными для клиентов в сфере цифровой трансформации.
Описание
- Создавать, совершенствовать и оптимизировать крупномасштабные конвейеры данных с использованием Apache Spark и Python/PySpark
- Формировать надёжные и пригодные для повторного использования наборы данных для аналитических и бизнес-задач
- Создавать и поддерживать облачные решения для работы с данными в Microsoft Azure
- Эффективно обрабатывать, преобразовывать, хранить данные и обеспечивать их доступность на разных платформах и в приложениях
- Настраивать контроль качества, валидации, мониторинга и документирования конвейеров
- Взаимодействовать с инженерами по данным, специалистами по Data Science, архитекторами и представителями бизнеса, преобразуя потребности в практические решения
- Развивать инженерные стандарты, охватывающие качество кода, тестирование, контроль версий, CI/CD и автоматизацию
- Применять практики управления данными, каталогизации и мониторинга качества
- Участвовать в создании масштабируемых архитектур облачных платформ данных
Требования
- Не менее пяти лет профессионального опыта в инженерии данных
- Не менее пяти лет опыта работы в промышленной эксплуатации Apache Spark с Python или PySpark
- Подтверждённый опыт создания и поддержки производственных конвейеров в крупномасштабных или сложных средах данных
- Глубокое знание размерного моделирования и проектирования хранилищ данных
- Опыт проектирования масштабируемых облачных платформ данных
- Умение консультировать по практикам ETL/ELT и стандартам инженерии данных
- Желательно: опыт работы с Databricks, Delta Lake, Unity Catalog и Databricks Workflows
- Желательно: практический опыт создания решений по инженерии данных с Azure Databricks
- Желательно: знакомство с фреймворками управления данными и каталогизации данных
Преимущества
- Бессрочный трудовой договор
- Полностью удалённый формат работы; посещение офиса по желанию сотрудника
- Гибкий график и сокращённый рабочий день по пятницам
- Сокращённый рабочий день в июле и августе
- 22 дня отпуска и 2 личных дня
- 24 и 31 декабря — выходные дни
- На выбор 12 или 14 выплат в год
- Гибкий пакет льгот, включая ресторанную карту, ваучер на детский сад, медицинскую страховку, обучение и другие варианты с налоговыми преимуществами
- Скидки на технологические, развлекательные и образовательные услуги
- Доступ к Udemy Business, изучение языков, официальные сертификации и техническое обучение
- Поддержка карьерного развития, специализации и освоения новых направлений
- Программы поддержки здорового питания, физической активности и эмоционального благополучия
- Персональная и семейная помощь 24/7
- Разнообразная мультикультурная рабочая среда
- Социальные мероприятия и командообразующие активности