Leega е латиноамериканска технологична консултантска компания, специализирана в анализа на данни, облачните решения и цифровата трансформация. Услугите ѝ включват разработване на приложения, машинно обучение, анализ на управлението на риска и подкрепа за организации, които модернизират своите среди за данни. Leega работи с Google Cloud, AWS и Microsoft Azure, като помага на бизнеса да подобри управлението на данните и да внедри облачни технологии. Компанията също така се определя като първата организация в региона, сертифицирана от Google Cloud за анализ на данни.
Data инженер на средно ниво за GCP в Leega (дистанционна работа)
Присъединете се към Leega като GCP data инженер и изграждайте мащабируеми конвейери за данни и модерни платформи за данни. Ще работите с Databricks, Spark, ETL/ELT и архитектури Lakehouse.
Описание
- Изграждане и поддръжка на мащабируеми ETL/ELT конвейери за данни
- Управление на приемането, трансформацията и доставянето на данни в GCP среди
- Разработване на решения с Databricks, Spark и PySpark
- Проектиране и подобряване на архитектури Data Lake, Data Warehouse и Lakehouse
- Свързване на API, бази данни, платформи за поточно предаване и други източници на данни
- Поддържане на качеството и управлението на данните, както и надеждността на платформата
- Проследяване на производителността и намаляване на разходите за облачна инфраструктура
- Партньорство с екипите по BI, анализи и data science
Изисквания
- Поне четири години професионален опит в областта на data engineering
- Практически опит с услуги на Google Cloud като BigQuery, Cloud Storage или Dataflow
- Опит с Databricks и Spark за разпределена обработка на данни
- Отлични умения с Python и SQL
- Опит с релационно и размерно моделиране на данни
- Опит с оркестриране на конвейери чрез Airflow или сходни инструменти
- Работни познания по Git и практиките за контрол на версиите
- Опит с Delta Lake
- Познания по Terraform за инфраструктура като код
- Опит с Docker
- Познания по технологии за поточно предаване като Kafka или Pub/Sub
- Сертификат за GCP или Databricks
- Опит с проектиране на Lakehouse архитектури
- Познаване на BI платформи, включително Power BI, Looker или Tableau
- Разбиране на управлението на данни и бразилския Общ закон за защита на данните (LGPD)
- Средно или напреднало владеене на английски език
Придобивки
- Продължаващи възможности за професионално развитие
- Изцяло дистанционна позиция
- Позицията е отворена за кандидати с увреждания