Leega to latynoamerykańska firma konsultingowa z branży technologicznej, specjalizująca się w analityce danych, rozwiązaniach chmurowych i transformacji cyfrowej. Jej usługi obejmują tworzenie aplikacji, uczenie maszynowe, analitykę zarządzania ryzykiem oraz wsparcie organizacji modernizujących swoje środowiska danych. Leega współpracuje z Google Cloud, AWS i Microsoft Azure, pomagając firmom usprawniać zarządzanie danymi i wdrażać technologie chmurowe. Firma określa się również jako pierwsza organizacja w regionie certyfikowana przez Google Cloud w zakresie analityki danych.
Inżynier danych GCP średniego szczebla w Leega (zdalnie)
Dołącz do Leega jako inżynier danych GCP i twórz skalowalne potoki oraz nowoczesne platformy danych. Pracuj z Databricks, Spark, ETL/ELT i architekturami Lakehouse.
Opis
- Tworzenie i utrzymywanie skalowalnych potoków danych ETL/ELT
- Zarządzanie pozyskiwaniem, przekształcaniem i dostarczaniem danych w środowiskach GCP
- Tworzenie rozwiązań Databricks z wykorzystaniem Spark i PySpark
- Projektowanie i rozwijanie architektur Data Lake, Data Warehouse i Lakehouse
- Łączenie interfejsów API, baz danych, platform strumieniowych i innych źródeł danych
- Utrzymywanie jakości danych, ładu danych i niezawodności platformy
- Monitorowanie wydajności i ograniczanie kosztów infrastruktury chmurowej
- Współpraca z zespołami BI, analityki i Data Science
Wymagania
- Co najmniej cztery lata doświadczenia zawodowego w inżynierii danych
- Praktyczne doświadczenie z usługami Google Cloud, takimi jak BigQuery, Cloud Storage lub Dataflow
- Doświadczenie w korzystaniu z Databricks i Spark do rozproszonego przetwarzania danych
- Dobra znajomość języków Python i SQL
- Doświadczenie w relacyjnym i wielowymiarowym modelowaniu danych
- Doświadczenie w orkiestracji potoków za pomocą Airflow lub porównywalnych narzędzi
- Praktyczna znajomość Git i zasad kontroli wersji
- Doświadczenie w pracy z Delta Lake
- Znajomość Terraform do zarządzania infrastrukturą jako kodem
- Doświadczenie w korzystaniu z Dockera
- Znajomość technologii strumieniowych, takich jak Kafka lub Pub/Sub
- Certyfikat GCP lub Databricks
- Doświadczenie w projektowaniu architektur Lakehouse
- Znajomość platform BI, w tym Power BI, Looker lub Tableau
- Rozumienie zasad zarządzania danymi i brazylijskiej ogólnej ustawy o ochronie danych (LGPD)
- Znajomość języka angielskiego na poziomie średniozaawansowanym lub zaawansowanym
Benefity
- Możliwości dalszego rozwoju zawodowego
- Praca w pełni zdalna
- Zapraszamy do aplikowania osoby z niepełnosprawnościami