The Codest
The Codest
The Codest to międzynarodowa firma tworząca oprogramowanie, której siedziba główna znajduje się w Wielkiej Brytanii, a centra technologiczne w Polsce. Tworzy produkty cyfrowe i rozbudowuje zespoły inżynierskie klientów, angażując doświadczonych programistów zajmujących się rozwojem backendu i frontendu, chmurą oraz inżynierią danych. Firma współpracuje z dużymi przedsiębiorstwami, scale-upami i dostawcami oprogramowania przy realizacji projektów oraz uzupełnianiu zespołów, obsługując między innymi klientów z branż fintech, e-commerce i adtech.

Starszy inżynier danych Databricks

Twórz platformy Databricks i potoki danych zdalnie z Polski. Współtwórz aplikację bankową dla klientów dużej japońskiej grupy finansowej.

Opis

  • Twórz i utrzymuj skalowalne platformy danych oraz potoki Databricks.
  • Współpracuj z zespołami z różnych obszarów, zapewniając dostępne i wiarygodne dane na potrzeby analityki i business intelligence.
  • Wykorzystuj warstwy lakehouse Bronze, Silver i Gold do wdrażania architektury Medallion.
  • Twórz systemy zapewniania jakości danych z automatycznymi testami i monitoringiem.
  • Korzystaj z funkcji Delta Lake: time travel, vacuum i Z-ordering.
  • Twórz i utrzymuj złożone potoki ETL/ELT dla dużych, codziennych zbiorów danych.
  • Konfiguruj procesy CI/CD dla potoków danych za pomocą Databricks Asset Bundles lub podobnych narzędzi.
  • Twórz rozwiązania do przetwarzania wsadowego i w czasie rzeczywistym z użyciem Structured Streaming i Delta Live Tables.
  • Poprawiaj wydajność zadań Spark i efektywność kosztową dzięki automatycznemu skalowaniu klastrów oraz zarządzaniu zasobami.
  • Integruj API Databricks z systemami zewnętrznymi.
  • Projektuj skalowalne architektury danych z Unity Catalog, Delta Lake i Apache Spark.
  • Twórz architektury data mesh z mechanizmami zarządzania danymi i śledzenia ich pochodzenia.
  • Współtwórz aplikację bankową dla klientów wiodącej japońskiej grupy finansowej.

Wymagania

  • Co najmniej sześć lat doświadczenia w inżynierii danych.
  • Udokumentowane doświadczenie w projektowaniu i wdrażaniu gotowych do użytku produkcyjnego potoków danych oraz procesów ETL/ELT.
  • Biegła znajomość Python, PySpark i SQL.
  • Rozległe praktyczne doświadczenie z AWS Glue, Lambda, Redshift i S3.
  • Znajomość narzędzi do zarządzania i nadzoru nad danymi, w tym Unity Catalog i AWS SageMaker Unified Studio.
  • Doświadczenie w migracji danych i modernizacji starszych systemów.
  • Skuteczna komunikacja w języku angielskim.
  • Certyfikat Databricks Certified Professional Data Engineer lub równoważny będzie dodatkowym atutem.
  • Doświadczenie z konteneryzacją i narzędziami do orkiestracji, takimi jak Docker i Kubernetes, będzie dodatkowym atutem.

Benefity

  • Praca w zaangażowanym zespole nastawionym na współpracę.
  • Możliwości rozwoju zawodowego.
  • Udział w międzynarodowym projekcie aplikacji bankowej.
  • Praca zdalna.

Powiązane oferty pracy

Satispay

Starszy menedżer ds. księgowości — Włochy i Luksemburg

Satispay
201 – 500 Pracownicy
B2BFintechHandel elektroniczny

Kieruj operacyjną księgowością, zgodnością z przepisami i sprawozdawczością włoskich oraz luksemburskich spółek Satispay. Zarządzaj zespołem księgowym i wspieraj przejście na równoległą sprawozdawczość zgodną z IAS/IFRS.

Otwórz