Emeria Technologies
Emeria Technologies
Emeria Technologies świadczy usługi w zakresie nieruchomości mieszkaniowych i komercyjnych w całej Europie, wspierając właścicieli, najemców, inwestorów i firmy na każdym etapie zarządzania nieruchomościami. Oferta obejmuje nabywanie nieruchomości, leasing, wynajem, zarządzanie budynkami wielorodzinnymi oraz sprzedaż. Usługi są świadczone za pośrednictwem lokalnych sieci oddziałów i z wykorzystaniem technologii. Grupa działa w ośmiu krajach europejskich w oparciu o model wielomarkowy, obejmujący we Francji markę Foncia. Duży zespół obsługuje zarówno klientów indywidualnych, jak i biznesowych.

Freelance’owy inżynier danych — migracja do Snowflake

Przenieś brytyjską platformę analityczną Emeria z Azure Synapse do Snowflake, przebudowując potoki pobierania danych i konwertując procedury T-SQL. Zakres obejmuje kontrolę zgodności danych, tłumaczenie kodu z pomocą LLM oraz przekazanie wiedzy zespołowi.

Opis

  • Nadzorować 15 potoków Azure Data Factory i przebudować pobieranie danych z użyciem Fivetran, CDC lub skryptów ekstrakcji przyrostowej.
  • Przekonwertować około 200 procedur składowanych T-SQL do Snowflake przy wsparciu lekkiej warstwy Spark.
  • Korzystać z narzędzi LLM, aby przyspieszyć konwersję kodu i tworzenie testów.
  • Uruchamiać procesy równolegle i uzgadniać dane z istniejącymi raportami.
  • Dokumentować pracę i przekazywać wiedzę zespołowi w Wielkiej Brytanii.
  • Pomagać w migracji brytyjskiej platformy analitycznej z Azure Synapse do Snowflake, Fivetran i Airflow (MWAA).

Wymagania

  • Bardzo dobra znajomość Snowflake i Airflow.
  • Praktyczne doświadczenie w konwersji procedur składowanych T-SQL lub MS SQL do Snowflake, w tym SCD2, transakcji, pętli i MERGE.
  • Niedawne doświadczenie w używaniu LLM do tłumaczenia kodu i generowania testów na potrzeby projektu migracyjnego.
  • Dobra znajomość metod przyrostowego pobierania danych, takich jak delta i watermark.
  • Biegła znajomość języka angielskiego.
  • Umiejętność samodzielnej pracy i proaktywne podejście.
  • Znajomość Spark lub PySpark, Fivetran, Azure Synapse albo Data Factory będzie dodatkowym atutem.

Benefity

  • Praca zdalna.
  • Możliwe przedłużenie zlecenia.

Powiązane oferty pracy

Consort Group

Inżynier danych GCP w Consort Group (praca hybrydowa, Francja)

Consort Group
1001 – 5000 Pracownicy
DoradztwoLogistykaMarketing

Twórz chmurowe potoki danych oraz rozwiązania z zakresu danych i AI dla Consort Group, korzystając z Python, SQL, BigQuery i Dataflow. Zakres pracy obejmuje integrację i transformację danych oraz analitykę w modelu hybrydowym we Francji.

Otwórz