Leega je latinoamerička tehnološka konzultantska tvrtka usmjerena na analitiku podataka, cloud rješenja i digitalnu transformaciju. Njezine usluge uključuju razvoj aplikacija, strojno učenje, analitiku upravljanja rizicima i podršku organizacijama koje moderniziraju svoja podatkovna okruženja. Leega surađuje s platformama Google Cloud, AWS i Microsoft Azure te pomaže tvrtkama unaprijediti upravljanje podacima i prihvatiti cloud tehnologije. Tvrtka se također predstavlja kao prva organizacija u regiji certificirana od strane Google Clouda za analitiku podataka.
Data inženjer srednje razine za GCP u tvrtki Leega (rad na daljinu)
Pridružite se tvrtki Leega kao GCP data inženjer i radite na skalabilnim podatkovnim cjevovodima i modernim podatkovnim platformama. Radit ćete s tehnologijama Databricks, Spark, ETL/ELT i arhitekturama Lakehouse.
Opis
- Izgrađivati i održavati skalabilne ETL/ELT podatkovne cjevovode
- Upravljati unosom, transformacijom i isporukom podataka u GCP okruženjima
- Razvijati Databricks rješenja koristeći Spark i PySpark
- Dizajnirati i poboljšavati arhitekture Data Lake, Data Warehouse i Lakehouse
- Povezivati API-je, baze podataka, streaming platforme i druge izvore podataka
- Održavati kvalitetu podataka, upravljanje podacima i pouzdanost platforme
- Pratiti performanse i smanjivati troškove cloud infrastrukture
- Surađivati s timovima za BI, analitiku i podatkovnu znanost
Zahtjevi
- Najmanje četiri godine profesionalnog iskustva u data inženjerstvu
- Praktično iskustvo s Google Cloud uslugama kao što su BigQuery, Cloud Storage ili Dataflow
- Iskustvo u korištenju Databricksa i Sparka za distribuiranu obradu podataka
- Napredno znanje Pythona i SQL-a
- Iskustvo s relacijskim i dimenzionalnim modeliranjem podataka
- Iskustvo u orkestraciji cjevovoda pomoću Airflowa ili usporedivih alata
- Radno znanje Gita i praksi upravljanja verzijama
- Iskustvo u radu s Delta Lakeom
- Poznavanje Terraforma za infrastrukturu kao kod
- Iskustvo u korištenju Dockera
- Poznavanje streaming tehnologija kao što su Kafka ili Pub/Sub
- GCP ili Databricks certifikat
- Iskustvo u dizajniranju Lakehouse arhitektura
- Poznavanje BI platformi, uključujući Power BI, Looker ili Tableau
- Razumijevanje upravljanja podacima i brazilskog Općeg zakona o zaštiti podataka (LGPD)
- Srednja ili napredna razina znanja engleskog jezika
Pogodnosti
- Kontinuirane mogućnosti profesionalnog razvoja
- Potpuno radno mjesto na daljinu
- Otvoreno za kandidate s invaliditetom