
Blend360 — компания, оказывающая профессиональные услуги и помогающая компаниям из списка Fortune 1000 и другим крупным предприятиям решать сложные бизнес-задачи с помощью искусственного интеллекта, аналитики данных и решений на основе данных. Компания работает в сферах бизнес-аналитики, инжиниринга данных, анализа данных, MLOps и управления данными, объединяя специализированные команды и возможности ИИ для поддержки организаций в здравоохранении, финансовых услугах, энергетике, розничной торговле, технологиях, медиа и телекоммуникациях, а также в сфере путешествий и гостеприимства. Работа Blend360 получила признание, включая награду «Решение года, способствующее внедрению ИИ» и включение в список «Ведущие поставщики генеративных ИИ-услуг 2024 года».
Аналитик-инженер данных (AWS, Spark) — удалённо в Мексике
Создавайте и поддерживайте конвейеры данных и архитектуры озёр данных на AWS в Blend360, поставщике услуг в области ИИ. Используйте Spark, Glue, S3 и Iceberg для создания масштабируемых решений для работы с данными.
Описание
- Создавайте и поддерживайте масштабируемые конвейеры и платформы загрузки данных для пакетной обработки, потоковой передачи и захвата изменений.
- Разрабатывайте и оптимизируйте крупномасштабные процессы обработки данных с помощью Apache Spark и PySpark.
- Создавайте озёра данных на AWS и управляйте ими с использованием S3 и Apache Iceberg.
- Используйте AWS Glue для оркестрации ETL-процессов, Athena для бессерверных запросов и Lambda для обработки событий.
- Настраивайте контроль доступа к данным и безопасность с помощью AWS IAM.
- Сотрудничайте с аналитиками, специалистами по данным и инженерами платформ, чтобы превращать потребности в данных в готовые к эксплуатации решения.
- Следите за состоянием конвейеров и устраняйте проблемы с качеством данных.
- Повышайте надёжность и актуальность данных.
- Документируйте потоки данных, архитектурные решения и инженерные стандарты.
Требования
- Продвинутый практический опыт работы с сервисами AWS, такими как Glue, S3, Athena и IAM.
- Опыт обработки данных с помощью Apache Spark или PySpark.
- Знание архитектур озёр данных; опыт работы с Apache Iceberg будет преимуществом.
- Опыт работы с шаблонами загрузки данных для пакетной обработки, потоковой передачи и захвата изменений.
- Опыт использования SQL для запросов, проверки и исследовательского анализа.
- Глубокое понимание моделирования данных и крупномасштабной обработки данных.
- Умение сотрудничать с разными командами и ясно объяснять технические концепции нетехническим специалистам.
- Опыт работы с инфраструктурой как кодом или оркестрацией, например с Airflow, Step Functions или dbt, будет преимуществом.
- Знакомство с рабочими процессами разработки с поддержкой ИИ и инструментами повышения продуктивности инженеров.
- Продвинутый уровень английского для общения с международными командами.
- Не менее двух лет опыта в инженерии данных или смежной области.
- Практический опыт создания и поддержки облачных конвейеров данных и архитектур озёр данных на AWS.
Преимущества
- Рождественская премия.
- Накопительный фонд.
- Талоны на питание и продукты.
- Компенсация расходов на работу из дома.
- Страхование жизни MetLife с покрытием расходов на похороны.
- Медицинская страховка MetLife со скидками на стоматологические услуги и программой для зрения.
- Дополнительное страхование иждивенцев за отдельную плату.
- Ежегодное увеличение количества дней отпуска в зависимости от стажа.
- Отпускная надбавка.
- Официальные праздничные дни.
- Выходной в Страстную неделю.
- Выходной в День мёртвых.
- Выходной в канун Рождества.
- Гибкие варианты организации работы.
- Учебные планы, курсы и возможности профессионального развития.
- Занятия английским для развития навыков профессионального общения.
Похожие вакансии
Вакансии не найдены
Попробуйте изменить или сбросить фильтры, чтобы найти больше вакансий.