Emeria Technologies
Emeria Technologies
Emeria Technologies предоставляет услуги в сфере жилой и коммерческой недвижимости по всей Европе, помогая собственникам, арендаторам, инвесторам и компаниям на всех этапах управления недвижимостью. В спектр услуг входят приобретение объектов, лизинг, аренда, управление жилыми комплексами и продажа недвижимости. Они оказываются через местные филиальные сети и с применением технологий. Группа работает в восьми европейских странах по мультибрендовой модели, включающей Foncia во Франции. Большая команда обслуживает как частных клиентов, так и бизнес.

Внештатный инженер данных по миграции на Snowflake

Перенесите аналитическую платформу Emeria в Великобритании с Azure Synapse на Snowflake, перестроив конвейеры загрузки данных и преобразовав процедуры T-SQL. В задачи входят проверка соответствия данных, перевод кода с помощью LLM и передача знаний команде.

Описание

  • Координировать работу 15 конвейеров Azure Data Factory и перестроить загрузку данных с помощью Fivetran, CDC или скриптов инкрементального извлечения.
  • Преобразовать около 200 хранимых процедур T-SQL для Snowflake с поддержкой облегчённого слоя Spark.
  • Использовать инструменты LLM для ускорения преобразования кода и создания тестов.
  • Запускать процессы параллельно и сверять данные с существующей отчётностью.
  • Документировать работу и передавать знания команде в Великобритании.
  • Помогать переносить аналитическую платформу Великобритании с Azure Synapse на Snowflake, Fivetran и Airflow (MWAA).

Требования

  • Уверенное владение Snowflake и Airflow.
  • Практический опыт преобразования хранимых процедур T-SQL или MS SQL для Snowflake, включая SCD2, транзакции, циклы и MERGE.
  • Недавний опыт применения LLM для перевода кода и создания тестов в рамках проекта миграции.
  • Глубокое понимание методов инкрементальной загрузки, таких как delta и watermark.
  • Свободное владение английским языком.
  • Умение работать самостоятельно и проявлять инициативу.
  • Знание Spark или PySpark, Fivetran, Azure Synapse или Data Factory будет преимуществом.

Преимущества

  • Удалённая работа.
  • Возможно продление проекта.

Похожие вакансии

Consort Group

Инженер данных GCP в Consort Group (гибридный формат, Франция)

Consort Group
1 001 – 5 000 Сотрудники
КонсалтингЛогистикаМаркетинг

Создавайте облачные конвейеры данных и решения в области данных и ИИ для Consort Group с помощью Python, SQL, BigQuery и Dataflow. Работа включает интеграцию и преобразование данных, а также аналитику в гибридном формате во Франции.

Открыть