EUROPEAN DYNAMICS
EUROPEAN DYNAMICS
501 – 1000 Pracownicy
DoradztwoLogistykaMarketing
EUROPEAN DYNAMICS tworzy oprogramowanie dla administracji elektronicznej i świadczy usługi IT na rzecz instytucji, organizacji oraz dużych przedsiębiorstw na całym świecie. Portfolio firmy obejmuje elektroniczne rejestry ludności i przedsiębiorstw, systemy zarządzania danymi finansowymi, platformy zamówień publicznych, rozwiązania chmurowe, doradztwo, tworzenie oprogramowania na zamówienie oraz outsourcing. Firma inwestuje również w badania i rozwój w obszarze nowych technologii informacyjno-komunikacyjnych oraz uczestniczy w projektach międzynarodowych. Działając w ponad 47 krajach, EUROPEAN DYNAMICS kładzie nacisk na jakość i bezpieczeństwo swoich produktów i usług.

Starszy inżynier ds. analityki baz danych

Twórz i optymalizuj potoki danych w dbt, PySpark i Apache Iceberg na potrzeby europejskich projektów technologicznych sektora publicznego. Praca hybrydowa w Brukseli, w biurze firmy lub u klienta.

Opis

  • Twórz niezawodne i skalowalne potoki oraz przepływy pracy transformacji danych.
  • Poprawiaj wydajność projektów dbt i skracaj czas ich wykonywania.
  • Twórz i dokumentuj kontrole jakości danych oraz testy kontrolne dbt.
  • Konfiguruj automatyczne testy regresyjne i walidację, aby utrzymywać jakość i spójność wyników potoków.
  • Dziel się z zespołem praktykami utrzymywania i rozwijania projektów dbt.
  • Przekładaj wymagania biznesowe i dokumenty analityczne na operacyjne potoki transformacji danych.
  • Współpracuj na miejscu z zespołem programistycznym i zespołem IT dużego klienta.

Wymagania

  • Wykształcenie wyższe w dziedzinie informatyki, technologii informacyjnych, inżynierii systemów lub pokrewnej oraz co najmniej 12 lat odpowiedniego doświadczenia w IT.
  • Praktyczne doświadczenie w korzystaniu z dbt, najlepiej dbt Core, przy projektowaniu, utrzymywaniu, testowaniu, dokumentowaniu i rozwijaniu produkcyjnych projektów transformacji analitycznych.
  • Doświadczenie w inżynierii analitycznej i nowoczesnym modelowaniu danych, w tym w architekturach warstwowych, wielokrotnego użytku makrach, kontrolach jakości danych i CI/CD.
  • Doświadczenie w tworzeniu transformacji PySpark do przetwarzania dużych zbiorów danych; optymalizacja zadań Spark będzie dodatkowym atutem.
  • Praktyczne doświadczenie z Apache Iceberg, w tym zarządzanie partycjami i ewolucją schematów, migawkami oraz funkcją time travel.
  • Doświadczenie w pracy z narzędziami do orkiestracji i harmonogramowania zadań, takimi jak Dagster.
  • Bardzo dobra znajomość SAS ETL i starszych baz kodu; migracja przepływów pracy SAS do dbt będzie dużym atutem.
  • Biegła znajomość SQL, w tym złożonych transformacji, optymalizacji wydajności i przetwarzania przyrostowego.
  • Dobra znajomość wykonywania zadań Apache Spark, partycjonowania, optymalizacji układu plików i strojenia wydajności.
  • Bardzo dobra znajomość walidacji i uzgadniania danych oraz testowania podczas migracji starszych systemów do dbt i PySpark.
  • Znajomość kontroli wersji i pracy zespołowej nad kodem, w tym Git, przeglądów kodu, zarządzania wydaniami i zautomatyzowanych potoków wdrożeniowych.
  • Biegła znajomość języka angielskiego.

Benefity

  • Konkurencyjne wynagrodzenie zależne od kwalifikacji i doświadczenia.
  • Do wyboru: praca kontraktowa lub pakiet wynagrodzenia z pełnym zestawem świadczeń.
  • Poufny proces rekrutacyjny.
  • Międzynarodowe, wielojęzyczne i wielokulturowe środowisko pracy.
  • Równe szanse zatrudnienia.

Powiązane oferty pracy