GFT Technologies — технологическая компания, занимающаяся цифровой трансформацией и работающая в сферах консалтинга, страхования и кибербезопасности. Платформа Cookiebot помогает организациям собирать и управлять согласием пользователей, поддерживая соблюдение требований законодательства о конфиденциальности, включая GDPR и CCPA. Решения компании разработаны для интеграции с существующими цифровыми средами и используются более чем 600 000 клиентов по всему миру для более прозрачной и контролируемой работы с персональными данными.
Старший инженер по данным — удалённая работа в Бразилии
Старший инженер по данным, который создаёт масштабируемые конвейеры и платформы данных для аналитических инициатив GFT Technologies. Роль сосредоточена на производительности, качестве данных и управлении данными в распределённых средах.
Описание
- Создавать и развивать масштабируемые платформы данных для поддержки аналитических и стратегических инициатив.
- Создавать и поддерживать устойчивые высокопроизводительные конвейеры для обработки больших объёмов данных.
- Работать со значительными объёмами структурированных и неструктурированных данных.
- Обеспечивать качество, согласованность и управление данными на всём протяжении их жизненного цикла.
- Разрабатывать процессы приёма, преобразования и доставки данных.
- Сотрудничать с инженерами-программистами, аналитиками, специалистами по данным и представителями бизнеса.
- Участвовать в формировании решений по архитектуре данных и оценивать новые инструменты и технологии.
- Отслеживать и совершенствовать процессы обработки данных в распределённых системах.
- Участвовать в модернизации и дальнейшем развитии платформ данных.
Требования
- Значительный опыт работы в области инженерии данных в распределённых вычислительных средах.
- Продвинутое владение Apache Spark и Scala.
- Практический опыт работы с сервисами AWS, включая Glue, S3, EMR, Athena и Redshift.
- Понимание моделирования данных, процессов ETL/ELT и разработки конвейеров.
- Знание реляционных технологий и технологий баз данных NoSQL.
- Опыт обработки данных в пакетном и потоковом режимах.
- Знание признанных практик обеспечения качества, безопасности и управления данными.
- Уверенное владение системами контроля версий на базе Git.
- Опыт работы с Apache Kafka или Amazon MSK будет преимуществом.
- Знание подходов к модернизации устаревших систем будет преимуществом.
- Опыт работы с Delta Lake, Apache Hudi или Apache Iceberg будет преимуществом.
- Знакомство с инструментами DataOps и CI/CD для работы с данными, такими как dbt, Airflow и Terraform, будет преимуществом.
- Опыт проектирования архитектур Lakehouse или работы с ними будет преимуществом.
- Опыт работы со средами обработки больших объёмов данных будет преимуществом.
- Знание инструментов наблюдаемости данных и мониторинга конвейеров будет преимуществом.
- Командный настрой и интерес к совместной работе.
- Сильные аналитические способности и навыки решения проблем.
- Способность работать самостоятельно, расставлять приоритеты и эффективно распоряжаться временем.
- Интерес к решению сложных и инновационных технологических задач.
Преимущества
- Гибкая карта с набором льгот, позволяющая выбирать, как и где использовать средства.
- Стипендии на обучение по программам бакалавриата, магистратуры, MBA и языковым курсам.
- Программы, поощряющие получение профессиональных сертификатов.
- Гибкий график работы.
- Конкурентоспособная компенсация.
- Ежегодная оценка эффективности, поддерживаемая структурированным планом развития карьеры.
- Возможности построить международную карьеру.
- Доступ к Wellhub и TotalPass.
- Программа частного пенсионного обеспечения.
- Поддержка расходов на уход за детьми.
- Частное медицинское страхование.
- Стоматологическое страхование.
- Страхование жизни.