Talent Matchmakers — партнёр по подбору специалистов в сфере ИТ и технических профессий, основанный в 2017 году. Компания помогает бизнесу находить и привлекать кандидатов на технологические должности, сочетая знание ИТ-экосистемы с доступом к широкому кадровому резерву. Процесс подбора строится на понимании потребностей каждого клиента в найме, поддержании открытой коммуникации, тщательном отборе кандидатов и организации процесса с минимальным влиянием на текущую деятельность компании.
Инженер по данным — гибридная работа в Бухаресте
Создавайте масштабируемые конвейеры на Python, Spark, Kafka и Airflow для клиента из энергетического сектора. Проектируйте облачные озёра и хранилища данных для аналитики и машинного обучения.
Описание
- Создавать и поддерживать отказоустойчивые конвейеры и архитектуры данных для бизнес-аналитики, аналитики и машинного обучения
- Тесно сотрудничать с учёными по данным, аналитиками, инженерами и представителями бизнеса
- Преобразовывать бизнес-требования в масштабируемые и эффективные решения для работы с данными
- Понятно объяснять сложные технические концепции нетехническим заинтересованным сторонам
- Создавать высокопроизводительные и масштабируемые решения для обработки данных
- Совершенствовать хранение и извлечение данных, а также ETL-процессы
- Руководить проектированием и разработкой облачных решений для работы с данными
- Использовать GitLab для контроля версий, а также конвейеров сборки и развёртывания кода
- Писать и оптимизировать SQL-запросы, интегрируя несколько источников в озёра и хранилища данных
- Автоматизировать и упрощать конвейеры данных с помощью shell-скриптов и соответствующих инструментов
- Поддерживать развитие младших инженеров по данным посредством наставничества
- Руководить проверкой кода и обеспечивать соблюдение лучших инженерных практик
Требования
- Степень бакалавра в области STEM
- Не менее четырёх лет опыта работы инженером по данным или на сопоставимой должности, подтверждённый опытом реализации крупномасштабных решений для работы с данными
- Продвинутые навыки SQL, включая разработку сложных запросов
- Глубокий опыт программирования на Python для инженерии данных, создания специализированных решений обработки и автоматизации
- Обширный опыт работы с Apache Spark и Apache Kafka для распределённой и пакетной обработки
- Практический опыт использования Apache Airflow для оркестрации потоков данных
- Уверенный опыт работы с AWS или другим облачным провайдером
- Владение GitLab для контроля версий и процессов CI/CD
- Практический опыт работы с Docker и Kubernetes для контейнеризации
- Опыт работы с dbt для преобразования данных
- Опыт работы с shell-скриптами, например Bash
- Опыт работы с Java или Scala в дополнение к Python
- Опыт работы с Apache Hive
- Понимание принципов управления данными, практик безопасности и требований соответствия нормативам
- Знакомство с гибкими методологиями и кросс-функциональным взаимодействием
- Знакомство с концепциями машинного обучения
- Развитые навыки решения проблем и опыт работы с большими сложными наборами данных
- Отличные навыки коммуникации и сотрудничества между командами
- Способность наставлять младших инженеров и обеспечивать техническое руководство
Преимущества
- Сотрудничество по B2B-модели