Sedona Digital
Sedona Digital
Sedona Digital — технологическая консалтинговая компания, ориентированная на выстроенные процессы и работающая с организациями в таких отраслях, как здравоохранение и логистика. Компания занимается технологической стратегией, архитектурой и инженерией данных, искусственным интеллектом и прогнозной аналитикой, разработкой программных продуктов, модернизацией приложений, миграцией в облако, управляемыми сервисами Azure, DevOps и CI/CD. Кроме того, Sedona Digital оказывает поддержку в области безопасности облачных сред, управляемых операций центра мониторинга безопасности и постоянного соблюдения требований, помогая предприятиям создавать, эксплуатировать и защищать облачные технологические среды, ориентированные на работу с данными.

Ведущий инженер данных, удалённо в Румынии | Sedona Digital

Создавайте и поддерживайте платформы данных на PySpark, SQL и Databricks для клиентов Sedona Digital в страховом секторе. Работайте с конвейерами данных, сверкой, качеством данных и облачными решениями.

Описание

  • Оценивайте и перестраивайте конвейеры загрузки операционных данных и данных из исходных систем.
  • Проектируйте сопоставления данных, их происхождение и зависимости, а также контролируемые планы миграции и переключения.
  • Создавайте и поддерживайте подробные процессы сверки данных.
  • Совершенствуйте обработку данных на PySpark, а также возможности работы с иерархиями и свёртками.
  • Внедряйте тестирование, управление версиями, метаданные, наблюдаемость и контроль развёртывания.
  • Взаимодействуйте с бизнес- и техническими специалистами для повышения полноты данных.
  • Оценивайте варианты конвейеров данных GCP и помогайте внедрять выбранные решения.
  • Изучайте возможности получения сопоставлений и справочных данных напрямую из таких систем, как Microsoft Dynamics 365.
  • Поддерживайте изменения в иерархиях отчётности и логике фильтрации, включая оценку влияния, тестирование и сверку.
  • Создавайте и поддерживайте автоматизированные проверки качества данных, мониторинг и операционные средства контроля.
  • Помогайте командам внедрять централизованные возможности отчётности и работы с данными.
  • Готовьте техническую документацию, записи о принятых решениях, материалы сверки, пояснения расхождений и материалы для передачи работы.
  • Выполняйте задачи по приоритизированному бэклогу короткими итерационными спринтами совместно с инженерами и заинтересованными сторонами.

Требования

  • Не менее пяти лет профессионального опыта в инженерии данных или смежной области, включая значительный практический опыт создания и поддержки промышленных решений для работы с данными.
  • Уверенный практический опыт работы с PySpark, SQL и Databricks, включая разработку и поддержку готовых к промышленной эксплуатации конвейеров данных.
  • Практический опыт работы с технологиями и конвейерами данных GCP.
  • Опыт тестирования и оптимизации конвейеров данных, а также поддержки их эксплуатации.
  • Значительный опыт моделирования измерений, основных и справочных данных либо иерархических данных.
  • Опыт реализации сложного сопоставления сущностей, сопоставлений данных и логики свёртки с надлежащей прослеживаемостью.
  • Практический опыт внедрения автоматизированных проверок качества данных и процессов сверки.
  • Опыт работы с наблюдаемостью, историей аудита, контролем версий и CI/CD в решениях для инженерии данных.
  • Опыт анализа данных исходных систем и документирования контрактов, сопоставлений, происхождения и зависимостей данных.
  • Опыт управления контролируемыми переходами конвейеров данных или платформ.
  • Умение исследовать проблемы с данными и ясно объяснять различия в значениях, количестве записей, сопоставлениях и результатах иерархической обработки.
  • Умение напрямую взаимодействовать с командами платформ, аналитиками и бизнес-специалистами, преобразуя неоднозначные требования к отчётности и сопоставлениям в протестированные инженерные решения.
  • Развитые коммуникативные навыки и умение готовить краткую техническую документацию, записи о решениях, пояснения расхождений и материалы для передачи работы.
  • Самостоятельность и готовность работать в совместной итерационной среде разработки.
  • Преимущество: опыт работы в страховании, на лондонском страховом рынке, в перестраховании, брокерской деятельности, дистрибуции или со страховыми данными на уровне полисов.
  • Преимущество: опыт интеграции Microsoft Dynamics 365 или аналогичных операционных исходных систем.
  • Преимущество: опыт работы с Power BI, включая семантические модели и зависимости отчётности.
  • Преимущество: опыт работы с медленно меняющимися измерениями (SCD) и управлением историческими иерархиями.
  • Преимущество: опыт поддержки сложных решений для основных и справочных данных, сопоставления сущностей и иерархий.
  • Преимущество: опыт расследования расхождений в исторических данных и отчётности.
  • Преимущество: опыт поддержки контролируемых миграций данных, переходов на исходные системы или изменений платформ.
  • Преимущество: опыт работы в распределённых Agile-командах и взаимодействия с бизнес- и техническими специалистами из Великобритании.

Похожие вакансии

Sigma Software Group

Старший инженер данных — миграция на Databricks

Sigma Software Group

Миграция корпоративной розничной аналитики с BigQuery на Databricks Lakehouse. Разработка масштабируемых конвейеров PySpark, медальонной архитектуры и управляемых облачных платформ данных.

Открыть
Intetics

Старший архитектор данных (французский язык)

Intetics

Формируйте масштабируемую архитектуру данных и платформы SQL Server для Intetics. Работа охватывает управление данными, интеграции REST и тестирование внедрения.

Открыть
Intetics

Инженер данных для машинного обучения — удалённо из Румынии

Intetics

Создавайте инфраструктуру данных в реальном времени, графовые модели и системы временных рядов для анализа спортивных результатов. Поддерживайте оценку машинного обучения и системы ИИ для клиента Intetics из США.

Открыть
Emerging Travel Group

Инженер SRE и наблюдаемости платформы данных

Emerging Travel Group

Создавайте систему наблюдаемости для Trino, Kubernetes, баз данных, Hadoop и Apache Ozone. Улучшайте метрики DORA, сервисные дашборды и проактивное оповещение об инцидентах.

Открыть
Emerging Travel Group

Инженер инфраструктуры больших данных (удалённо)

Emerging Travel Group

Возглавьте инфраструктуру больших данных международной платформы, включая HDFS, объектное хранилище и Iceberg. Определяйте архитектуру платформы, квоты, каталоги, мониторинг и надёжность эксплуатации.

Открыть