Meltwater
Meltwater
Meltwater предоставляет аналитику медиа и социальных данных, помогая компаниям отслеживать публикации, понимать, что обсуждают потребители, и принимать решения на основе данных о СМИ и аудитории. Платформа объединяет мониторинг СМИ, социальное прослушивание, работу со СМИ, маркетинг влияния и аналитику продаж. Инструменты на базе ИИ помогают в решении задач маркетинга и связей с общественностью. Meltwater помогает организациям ориентироваться в быстро меняющейся медиасреде.

Ведущий инженер данных Snowflake

Создавайте масштабируемые платформы данных на Snowflake для аналитики, интеграций, отчетности и ИИ-приложений Meltwater. Объединяйте данные Salesforce и AWS с помощью надежных конвейеров.

Описание

  • Проектировать и поддерживать масштабируемые решения для работы с данными в Snowflake.
  • Создавать базы данных, схемы, таблицы, представления, защищенные представления, этапы и другие объекты Snowflake.
  • Разрабатывать готовые к эксплуатации преобразования данных с помощью SQL и Snowpark.
  • Внедрять Streams, Tasks, Dynamic Tables, Snowpipe, инкрементальную обработку и захват изменений данных в Snowflake.
  • Оптимизировать запросы, виртуальные хранилища, кластеризацию, хранение данных, вычислительные ресурсы и затраты на платформу.
  • Настраивать безопасный обмен данными и контроль доступа.
  • Создавать отказоустойчивые конвейеры ETL/ELT для структурированных и полуструктурированных данных.
  • Разрабатывать конвейеры пакетного, инкрементального, почти оперативного и событийного получения данных.
  • Подключать данные из Salesforce, REST API, SaaS-приложений, AWS, баз данных и файлов.
  • Создавать повторно используемые средства получения и преобразования данных.
  • Управлять изменениями схем, поздно поступающими данными, повторами и воспроизведением обработки, сверкой и полнотой данных от источника до целевой системы.
  • Создавать сценарии оркестрации с управлением зависимостями и обработкой сбоев.
  • Проектировать многомерные модели, таблицы фактов и измерений, витрины данных, подготовленные наборы данных и корпоративные модели данных.
  • Определять единые ключевые бизнес-сущности и метрики.
  • Создавать слои данных для аналитики, отчетности, операционных приложений и ИИ-нагрузок.
  • Разрабатывать конвейеры загрузки данных из Salesforce и их инкрементальной синхронизации или синхронизации через CDC в Snowflake.
  • Создавать конвейеры данных AWS с использованием S3, Lambda, SQS, SNS, EventBridge и связанных сервисов.
  • Обеспечивать безопасность перемещения данных и загрузки файлов, включая промежуточное хранение, архивирование, IAM, шифрование, секреты и контроль доступа.
  • Автоматизировать проверки качества данных, тестирование, мониторинг, журналирование, сбор метрик, оповещения и операционные панели мониторинга.
  • Расследовать и устранять инциденты с данными в рабочей среде, отслеживая последствия для вышестоящих и нижестоящих систем.
  • Писать чистый, повторно используемый, тестируемый и удобный для сопровождения код.
  • Участвовать в архитектурных обзорах и проверках кода.
  • Вести техническую документацию, карты данных и инструкции по эксплуатации.
  • Вносить вклад в CI/CD и практики автоматизированного развертывания.
  • Наставлять инженеров данных и помогать устанавливать инженерные стандарты.

Требования

  • Не менее 5 лет опыта в инженерии данных.
  • Не менее 3 лет практической работы со Snowflake.
  • Продвинутые навыки SQL, включая сложные преобразования и оптимизацию запросов.
  • Уверенное владение Python для обработки данных, автоматизации и интеграции API.
  • Опыт создания готовых к эксплуатации конвейеров ETL/ELT.
  • Опыт интеграции Snowflake с AWS.
  • Опыт получения данных из Salesforce или аналогичных корпоративных SaaS-платформ.
  • Глубокое понимание многомерного моделирования и современной архитектуры данных.
  • Опыт инкрементальной обработки, CDC и сверки данных.
  • Опыт внедрения средств контроля качества данных и мониторинга.
  • Опыт работы с Git, CI/CD и лучшими практиками разработки ПО.
  • Опыт работы со Snowpark.
  • Опыт работы со Snowflake Cortex.
  • Опыт работы со Streams, Tasks, Dynamic Tables, Snowpipe и безопасным обменом данными.
  • Опыт работы с Salesforce Bulk API, CDC и Platform Events.
  • Опыт работы с AWS Lambda, S3, SQS, SNS, EventBridge и Glue.
  • Опыт работы с dbt или аналогичным фреймворком преобразования данных.
  • Опыт работы с Airflow, Dagster, Prefect или аналогичной платформой оркестрации.
  • Опыт работы с Terraform или инфраструктурой как кодом.
  • Опыт поддержки нагрузок ИИ/МО и RAG на базе Snowflake.
  • Наличие сертификатов Snowflake будет преимуществом.

Преимущества

  • Гибкий оплачиваемый отпуск.
  • Комплексное медицинское страхование.
  • Программы поддержки сотрудников, охватывающие психическое здоровье, юридические и финансовые вопросы, благополучие и поведенческие потребности.
  • Бесплатная подписка CalmApp для сотрудников и их близких.
  • Гибридный формат работы.
  • Отпуск по семейным обстоятельствам, продолжительность которого увеличивается с выслугой лет.
  • Инклюзивное сообщество.
  • Постоянные возможности для профессионального развития.

Похожие вакансии

Lloyds Banking Group

Персональный ассистент руководства корпоративного казначейства группы (командировка на 12 месяцев)

Lloyds Banking Group

Поддержка руководителей корпоративного казначейства Lloyds Banking Group: управление сложным расписанием, взаимодействие с заинтересованными сторонами, административные задачи и подготовка материалов для руководства в гибридном формате.

Открыть
Exploring

Удалённый менеджер по работе с клиентами — Brumark Flooring

Exploring
51 – 200 Сотрудники
B2BМаркетингПроизводство

Ведите клиентские аккаунты, готовьте расчёты и обрабатывайте заказы, помогая развивать продажи специализированных напольных покрытий Brumark. Поддерживайте клиентов на отраслевых выставках, экспозициях и мероприятиях.

Открыть
GXO Logistics, Inc.

Администратор транспортного отдела — GXO Logistics, Уолтем-Эбби

GXO Logistics, Inc.

Координируйте перемещения транспорта и водителей на объекте GXO Logistics для Sainsbury’s, поддерживайте транспортные системы и точность записей. График: четыре смены подряд, затем четыре выходных; с 06:00 до 18:00.

Открыть
Edwards Lifesciences

Помощник руководителя, кампус в Валенсии

Edwards Lifesciences

Оказывать административную поддержку кампусу Edwards Lifesciences в Валенсии, включая координацию форума и работу с руководством. Управлять календарями, встречами, мероприятиями, документами и отношениями с поставщиками.

Открыть
Implico Group

Менеджер по партнёрской экосистеме SAP Cloud

Implico Group

Развивайте партнёрскую экосистему Implico для SAP Private и Public Cloud: привлекайте системных интеграторов и помогайте им расширять компетенции. Основной фокус роли — Северная Америка, Латинская Америка и Карибский регион.

Открыть
equada GmbH

Менеджер по работе с партнёрами в Германии

equada GmbH
11 – 50 Сотрудники
B2BSaaSТелекоммуникации

Развивайте сеть партнёров по продажам siptelecom в Германии: привлекайте новых партнёров, помогайте им начать работу и укрепляйте существующие отношения. Помогайте партнёрам продавать телекоммуникационные решения и облачные коммуникационные сервисы.

Открыть
Just Group plc

Старший менеджер по сопровождению переходов, упрощённые услуги

Just Group plc

Координируйте переходы пенсионных схем, очистку данных и взаимодействие с заинтересованными сторонами в страховом и пенсионном бизнесе Just Group. Поддерживайте упрощённые услуги и сделки по снижению рисков в схемах с установленными выплатами.

Открыть
EPIC Health - Exclusive Physicians | Integrated & Comprehensive

Медицинский регистратор на месте

EPIC Health - Exclusive Physicians | Integrated & Comprehensive
51 – 200 Сотрудники
B2CВелнесЗдравоохранение

Приветствуйте пациентов и организуйте их регистрацию и работу стойки приема в EPIC Health. Помогайте создавать удобную и ориентированную на пациента атмосферу в этой очной роли медицинского регистратора.

Открыть
Salute

Координатор по финансовым операциям и работе с клиентами

Salute

Координируйте финансовые и операционные процессы, а также работу с клиентами по договорам на услуги для центров обработки данных Salute. Контролируйте выставление счетов, отчетность, работу с поставщиками и показатели аккаунтов.

Открыть
Thermo Fisher Scientific

Старший менеджер по работе с клиентами: хроматография и масс-спектрометрия — Венето, Италия

Thermo Fisher Scientific

Ведение клиентских счетов Thermo Fisher Scientific в сфере хроматографии и масс-спектрометрии в регионе Венето. Развитие бизнеса за счёт продлений, прогнозирования и прочных отношений с клиентами.

Открыть