Leega — латиноамериканська технологічна консалтингова компанія, що спеціалізується на аналітиці даних, хмарних рішеннях і цифровій трансформації. Серед її послуг — розроблення застосунків, машинне навчання, аналітика управління ризиками та підтримка організацій, які модернізують свої середовища даних. Leega співпрацює з Google Cloud, AWS і Microsoft Azure, допомагаючи компаніям удосконалювати керування даними та впроваджувати хмарні технології. Компанія також називає себе першою в регіоні організацією, сертифікованою Google Cloud у сфері аналітики даних.
Інженер з даних GCP середнього рівня в Leega (віддалено)
Приєднуйтеся до Leega як інженер з даних GCP і створюйте масштабовані конвеєри та сучасні платформи даних. Працюйте з Databricks, Spark, ETL/ELT і архітектурами Lakehouse.
Опис
- Створювати й підтримувати масштабовані конвеєри даних ETL/ELT
- Керувати надходженням, перетворенням і доставкою даних у середовищах GCP
- Розробляти рішення Databricks із використанням Spark і PySpark
- Проєктувати та вдосконалювати архітектури Data Lake, Data Warehouse і Lakehouse
- Підключати API, бази даних, потокові платформи та інші джерела даних
- Підтримувати якість даних, управління даними та надійність платформи
- Відстежувати продуктивність і зменшувати витрати на хмарну інфраструктуру
- Співпрацювати з командами BI, аналітики та Data Science
Вимоги
- Щонайменше чотири роки професійного досвіду в інженерії даних
- Практичний досвід роботи із сервісами Google Cloud, такими як BigQuery, Cloud Storage або Dataflow
- Досвід використання Databricks і Spark для розподіленої обробки даних
- Впевнені навички Python і SQL
- Досвід роботи з реляційним і багатовимірним моделюванням даних
- Досвід оркестрації конвеєрів за допомогою Airflow або подібних інструментів
- Робоче знання Git і практик контролю версій
- Досвід роботи з Delta Lake
- Знання Terraform для керування інфраструктурою як кодом
- Досвід використання Docker
- Знання потокових технологій, таких як Kafka або Pub/Sub
- Сертифікація GCP або Databricks
- Досвід проєктування архітектур Lakehouse
- Знайомство з BI-платформами, зокрема Power BI, Looker або Tableau
- Розуміння принципів управління даними та бразильського Загального закону про захист даних (LGPD)
- Англійська мова на середньому або просунутому рівні
Переваги
- Можливості для подальшого професійного розвитку
- Повністю віддалена робота
- До участі запрошуються кандидати з інвалідністю