Talent Matchmakers to partner w rekrutacji specjalistów IT i pracowników technicznych, założony w 2017 roku. Firma pomaga przedsiębiorstwom identyfikować i angażować kandydatów na stanowiska technologiczne, łącząc znajomość ekosystemu IT z dostępem do szerokiej puli talentów. Proces rekrutacyjny opiera się na zrozumieniu potrzeb rekrutacyjnych każdego klienta, otwartej komunikacji, starannym wyborze kandydatów oraz prowadzeniu procesu przy minimalnych zakłóceniach bieżącej działalności firmy.
Inżynier danych — praca hybrydowa w Bukareszcie
Twórz skalowalne potoki danych w Pythonie, Sparku, Kafce i Airflow dla klienta z sektora energetycznego. Projektuj chmurowe jeziora i hurtownie danych wspierające analitykę oraz uczenie maszynowe.
Opis
- Tworzenie i utrzymywanie odpornych potoków oraz architektur danych na potrzeby analityki biznesowej, analityki i uczenia maszynowego
- Ścisła współpraca z data scientistami, analitykami, inżynierami i interesariuszami biznesowymi
- Przekształcanie wymagań biznesowych w skalowalne i wydajne rozwiązania danych
- Jasne wyjaśnianie złożonych koncepcji technicznych interesariuszom nietechnicznym
- Dostarczanie wysokowydajnych, skalowalnych rozwiązań do przetwarzania danych
- Usprawnianie przechowywania i pobierania danych oraz procesów ETL
- Kierowanie projektowaniem i rozwojem chmurowych rozwiązań danych
- Korzystanie z GitLaba do kontroli wersji oraz potoków budowania i wdrażania kodu
- Tworzenie i optymalizowanie zapytań SQL przy jednoczesnej integracji wielu źródeł w jeziorach i hurtowniach danych
- Automatyzowanie i upraszczanie potoków danych za pomocą skryptów powłoki i odpowiednich narzędzi
- Wspieranie rozwoju młodszych inżynierów danych poprzez mentoring
- Prowadzenie przeglądów kodu i dbanie o przestrzeganie najlepszych praktyk inżynierskich
Wymagania
- Wykształcenie wyższe na poziomie licencjackim lub inżynierskim w dziedzinie STEM
- Co najmniej cztery lata doświadczenia jako inżynier danych lub na porównywalnym stanowisku, z udokumentowanym doświadczeniem w dostarczaniu rozwiązań danych na dużą skalę
- Zaawansowana znajomość SQL, w tym tworzenie złożonych zapytań
- Duże doświadczenie w programowaniu w Pythonie na potrzeby inżynierii danych, niestandardowych rozwiązań przetwarzania i automatyzacji
- Szerokie doświadczenie z Apache Spark i Apache Kafka w rozproszonym i wsadowym przetwarzaniu danych
- Praktyczne doświadczenie w korzystaniu z Apache Airflow do orkiestracji przepływów danych
- Dobre doświadczenie z AWS lub innym dostawcą chmury
- Biegłość w korzystaniu z GitLaba do kontroli wersji i obsługi procesów CI/CD
- Praktyczne doświadczenie z Dockerem i Kubernetesem w zakresie konteneryzacji
- Doświadczenie z dbt w transformacji danych
- Doświadczenie w pisaniu skryptów powłoki, takich jak Bash
- Doświadczenie z Javą lub Scalą, poza Pythonem
- Doświadczenie z Apache Hive
- Znajomość zasad zarządzania danymi, praktyk bezpieczeństwa i wymagań dotyczących zgodności
- Znajomość metodyk zwinnych i współpracy międzyfunkcyjnej
- Znajomość koncepcji uczenia maszynowego
- Umiejętność rozwiązywania problemów i doświadczenie w pracy z dużymi, złożonymi zbiorami danych
- Doskonałe umiejętności komunikacji i współpracy między zespołami
- Umiejętność mentoringu młodszych inżynierów i zapewniania przywództwa technicznego
Benefity
- Współpraca B2B