GFT Technologies — технологическая компания, занимающаяся цифровой трансформацией и работающая в сферах консалтинга, страхования и кибербезопасности. Платформа Cookiebot помогает организациям собирать и управлять согласием пользователей, поддерживая соблюдение требований законодательства о конфиденциальности, включая GDPR и CCPA. Решения компании разработаны для интеграции с существующими цифровыми средами и используются более чем 600 000 клиентов по всему миру для более прозрачной и контролируемой работы с персональными данными.
Инженер по данным AWS (средний/старший уровень) — удалённая работа в Бразилии
Удалённая работа инженером по данным AWS в GFT Technologies, глобальной компании в сфере технологий и цифровых услуг. Разработка конвейеров данных, многомерных моделей, практик управления данными и архитектуры Lakehouse для аналитики и ИИ.
Описание
- Использовать ETL-инструменты для организации, сбора и обработки больших объёмов данных.
- Преобразовывать бизнес-цели клиентов в стратегии управления информацией и бизнес-аналитики.
- Эксплуатировать конвейеры данных и защищать информацию с помощью безопасного управления доступом.
- Разрабатывать и публиковать метрики и информационные панели на основе собранных данных.
- Поддерживать качество данных и сохранять их целостность на всех этапах процессов.
- Поддерживать модернизацию платформы данных с помощью архитектуры Lakehouse, управления данными, контроля качества и подготовки к аналитическим и ИИ-сценариям.
- Создавать многомерные модели для бизнес-команд, информационных панелей и отчётности.
- Контролировать полный жизненный цикл данных: от загрузки и обработки до хранения, преобразования, использования и управления.
Требования
- Опыт работы среднего или старшего уровня в инженерии данных и AWS.
- Практический опыт сбора, преобразования и загрузки данных с использованием ETL-инструментов и Python или PySpark.
- Знание AWS Glue, EMR, Athena, SNS, Lambda, Step Functions, S3, Lake Formation, IAM и CloudWatch.
- Знание моделирования данных NoSQL и таких баз данных, как MongoDB, DynamoDB и Hadoop.
- Знание архитектуры Lakehouse с использованием Apache Iceberg, включая управление аналитическими таблицами, версионирование, эволюцию схем, секционирование и оптимизацию производительности.
- Опыт работы с высокомасштабируемыми движками запросов к данным, такими как Athena, Trino, Presto или Spark SQL.
- Умение оптимизировать запросы и работать с колоночными форматами Parquet и ORC.
- Знание концепций многомерного моделирования, включая факты, измерения, гранулярность, ключи, иерархии, метрики и KPI.
- Опыт работы со структурированными, полуструктурированными и неструктурированными данными.
- Опыт проведения модульного и нагрузочного тестирования.
- Знание практик облачной безопасности, управления доступом и мониторинга.
- Сертификаты AWS Practitioner и AWS Data Engineer будут преимуществом.
- Опыт обеспечения качества и наблюдаемости данных будет преимуществом.
- Опыт работы с Terraform и CloudWatch будет преимуществом.
- Знание Data Mesh будет преимуществом.
- Знание способов применения ИИ к данным будет преимуществом.
Преимущества
- Гибкая карта льгот с возможностью выбирать, как и где использовать средства.
- Стипендиальная поддержка для обучения по программам бакалавриата, магистратуры, MBA и языковым программам.
- Программы, поощряющие и поддерживающие получение профессиональных сертификатов.
- Гибкий график работы.
- Конкурентоспособная компенсация.
- Ежегодная оценка эффективности при поддержке структурированного плана карьерного развития.
- Возможности международного карьерного роста.
- Доступ к Wellhub и TotalPass.
- Частный пенсионный план.
- Помощь по уходу за детьми.
- Медицинская страховка.
- Стоматологическая страховка.
- Страхование жизни.