EUROPEAN DYNAMICS tworzy oprogramowanie dla administracji elektronicznej i świadczy usługi IT na rzecz instytucji, organizacji oraz dużych przedsiębiorstw na całym świecie. Portfolio firmy obejmuje elektroniczne rejestry ludności i przedsiębiorstw, systemy zarządzania danymi finansowymi, platformy zamówień publicznych, rozwiązania chmurowe, doradztwo, tworzenie oprogramowania na zamówienie oraz outsourcing. Firma inwestuje również w badania i rozwój w obszarze nowych technologii informacyjno-komunikacyjnych oraz uczestniczy w projektach międzynarodowych. Działając w ponad 47 krajach, EUROPEAN DYNAMICS kładzie nacisk na jakość i bezpieczeństwo swoich produktów i usług.
Twórz i optymalizuj potoki danych w dbt, PySpark i Apache Iceberg na potrzeby europejskich projektów technologicznych sektora publicznego. Praca hybrydowa w Brukseli, w biurze firmy lub u klienta.
Twórz niezawodne i skalowalne potoki oraz przepływy pracy transformacji danych.
Poprawiaj wydajność projektów dbt i skracaj czas ich wykonywania.
Twórz i dokumentuj kontrole jakości danych oraz testy kontrolne dbt.
Konfiguruj automatyczne testy regresyjne i walidację, aby utrzymywać jakość i spójność wyników potoków.
Dziel się z zespołem praktykami utrzymywania i rozwijania projektów dbt.
Przekładaj wymagania biznesowe i dokumenty analityczne na operacyjne potoki transformacji danych.
Współpracuj na miejscu z zespołem programistycznym i zespołem IT dużego klienta.
Wymagania
Wykształcenie wyższe w dziedzinie informatyki, technologii informacyjnych, inżynierii systemów lub pokrewnej oraz co najmniej 12 lat odpowiedniego doświadczenia w IT.
Praktyczne doświadczenie w korzystaniu z dbt, najlepiej dbt Core, przy projektowaniu, utrzymywaniu, testowaniu, dokumentowaniu i rozwijaniu produkcyjnych projektów transformacji analitycznych.
Doświadczenie w inżynierii analitycznej i nowoczesnym modelowaniu danych, w tym w architekturach warstwowych, wielokrotnego użytku makrach, kontrolach jakości danych i CI/CD.
Doświadczenie w tworzeniu transformacji PySpark do przetwarzania dużych zbiorów danych; optymalizacja zadań Spark będzie dodatkowym atutem.
Praktyczne doświadczenie z Apache Iceberg, w tym zarządzanie partycjami i ewolucją schematów, migawkami oraz funkcją time travel.
Doświadczenie w pracy z narzędziami do orkiestracji i harmonogramowania zadań, takimi jak Dagster.
Bardzo dobra znajomość SAS ETL i starszych baz kodu; migracja przepływów pracy SAS do dbt będzie dużym atutem.
Biegła znajomość SQL, w tym złożonych transformacji, optymalizacji wydajności i przetwarzania przyrostowego.
Dobra znajomość wykonywania zadań Apache Spark, partycjonowania, optymalizacji układu plików i strojenia wydajności.
Bardzo dobra znajomość walidacji i uzgadniania danych oraz testowania podczas migracji starszych systemów do dbt i PySpark.
Znajomość kontroli wersji i pracy zespołowej nad kodem, w tym Git, przeglądów kodu, zarządzania wydaniami i zautomatyzowanych potoków wdrożeniowych.
Biegła znajomość języka angielskiego.
Benefity
Konkurencyjne wynagrodzenie zależne od kwalifikacji i doświadczenia.
Do wyboru: praca kontraktowa lub pakiet wynagrodzenia z pełnym zestawem świadczeń.
Poufny proces rekrutacyjny.
Międzynarodowe, wielojęzyczne i wielokulturowe środowisko pracy.
Twórz skalowalne potoki danych z użyciem dbt, PySpark i Iceberg. Wspieraj europejskie instytucje dzięki inżynierii analitycznej, testowaniu i migracji ze starszych systemów SAS.