Mindrift
Mindrift
Mindrift — это маркетплейс специалистов в области искусственного интеллекта и SaaS-платформа, которая связывает профессиональных участников и экспертов в различных предметных областях с проектами технологических компаний по обучению и оценке ИИ. Будучи частью Toloka, компания сотрудничает с авторами, редакторами, специалистами по обеспечению качества, учёными и другими профильными экспертами, которые помогают создавать обучающие данные, оценивать безопасность и способность моделей к рассуждению, проверять качество медиаконтента и разрабатывать реалистичные сценарии для повышения эффективности и надёжности ИИ. Mindrift привлекает и проверяет участников с помощью тестовых заданий и верификации личности, а затем предлагает гибкие оплачиваемые проекты в сфере обучения и оценки ИИ.

Старший инженер по сбору данных на Python — фриланс, удалённо из Польши

Mindrift ищет опытного Python-инженера для создания надёжных процессов веб-скрейпинга для проектов в сфере ИИ. Роль предполагает извлечение, проверку и обработку структурированных данных со сложных динамических веб-сайтов.

Описание

  • Управлять полными процессами извлечения данных со сложных веб-сайтов
  • Предоставлять полные, точные и надёжные структурированные наборы данных
  • Применять инструменты и адаптированные рабочие процессы для ускорения сбора, проверки и выполнения задач
  • Надёжно извлекать данные из интерактивных и динамических веб-источников
  • Адаптировать методы скрейпинга для контента, отображаемого с помощью JavaScript, и меняющегося поведения сайтов
  • Поддерживать качество данных с помощью проверки, сопоставления между источниками, стандартов форматирования и систематического контроля
  • Обрабатывать масштабный скрейпинг с использованием эффективной пакетной и параллельной обработки
  • Отслеживать сбои извлечения и сохранять стабильность при небольших изменениях структуры веб-сайтов
  • Применять Apify, OpenRouter и связанные технологии для извлечения и обработки веб-данных

Требования

  • Более 5 лет релевантного опыта в области инженерии данных, веб-скрейпинга, автоматизации или разработки программного обеспечения
  • Наличие степени бакалавра или магистра в области инженерии, прикладной математики, компьютерных наук или смежной технической дисциплины будет преимуществом
  • Прочная практическая база в написании скриптов, автоматизации и рабочих процессах извлечения данных
  • Продвинутый опыт скрейпинга на Python с использованием BeautifulSoup, Selenium или сопоставимых инструментов, JavaScript- и AJAX-контента, бесконечной прокрутки и API на основе прокси
  • Умение извлекать информацию из сложных иерархий, архивных страниц и непоследовательного HTML-кода
  • Опыт очистки, нормализации и проверки данных для передачи в форматах CSV, JSON и Google Sheets
  • Опыт работы с системами защиты от ботов и меняющимися структурами веб-сайтов в крупном масштабе
  • Практический опыт использования AWS или эквивалентной облачной инфраструктуры и Docker в производственных рабочих процессах
  • Практический опыт применения LangChain, OpenRouter или аналогичных LLM-фреймворков для автоматизации
  • Высокое внимание к деталям и сильная ориентация на точность данных
  • Самостоятельный стиль работы и способность исследовать и решать проблемы без постоянного контроля
  • Английский язык на уровне выше среднего (B2) или выше
  • Наличие профиля на GitHub будет преимуществом

Преимущества

  • Фриланс-проект
  • Неполная занятость — примерно 10–20 часов в неделю в активные фазы проекта
  • Удалённая работа из Польши
  • Оплата до эквивалента 40 долларов США в час в зависимости от уровня опыта и темпа выполнения работы

Похожие вакансии

Walmart

Старший менеджер по разработке ПО — платформы для разработчиков

Walmart

Руководите корпоративными платформами для разработчиков и CI/CD в Walmart, помогая инженерам создавать ПО в больших масштабах. Разрабатывайте облачные инструменты, которые повышают эффективность поставки ПО во всех инженерных командах Walmart.

Открыть
Docplanner

Старший инженерный менеджер, платежи (удалённо, Испания)

Docplanner
1 001 – 5 000 Сотрудники
SaaSЗдравоохранениеМаркетплейс

Руководите инженерной командой платежей Docplanner и создавайте медицинские платёжные продукты с ИИ. Повышайте удержание, вовлечённость и непрерывность медицинской помощи.

Открыть
Retorna

Full Stack инженер мобильных приложений (React Native, NestJS)

Retorna
51 – 200 Сотрудники
B2CФинтех

Разрабатывайте финтех-приложение Retorna для международных переводов: создавайте мобильные функции на React Native и безопасные масштабируемые сервисы на NestJS.

Открыть
Method CRM

Разработчик полного цикла уровня middle в Method CRM

Method CRM

Разрабатывайте функции на C#/.NET и React для платформы Method CRM, помогающей малому бизнесу управлять рабочими процессами. Работайте над безопасным администрированием, устранением неполадок, тестированием и масштабированием платформы.

Открыть
Docplanner

Старший менеджер инженерной команды, платежи

Docplanner
1 001 – 5 000 Сотрудники
SaaSЗдравоохранениеМаркетплейс

Руководите командой платежей Docplanner из 7–9 человек, развивая инженерию и улучшая платежные решения. Внедряйте подход AI-native и помогайте делать медицинский опыт более человечным.

Открыть
Perrigo Company plc

Старший руководитель инженерной службы — Perrigo, О-Клэр, штат Висконсин

Perrigo Company plc

Руководите капитальными проектами, соблюдением требований и автоматизацией на производственной площадке детского питания Perrigo в О-Клэр, работающей по стандартам GMP. Формируйте и развивайте инженерную команду площадки.

Открыть
Concept Solutions, LLC

Менеджер релизов и управления конфигурацией ПО — Concept Solutions

Concept Solutions, LLC

Координируйте выпуски ПО, управление конфигурацией и контроль изменений для федеральной технологической программы Concept Solutions. Поддерживайте модернизацию приложений и непрерывность развертывания существующих приложений и общей платформы.

Открыть
Patrianna

Руководитель DevOps-инженерии (удалённо, Польша)

Patrianna
51 – 200 Сотрудники
ИгрыКонсалтингМаркетинг

Руководите направлениями Site Reliability и Platform Engineering для глобальной B2B-платформы Patrianna в сфере iGaming. Развивайте надёжную инфраструктуру, Kubernetes и облачные операции, а также внедряйте ИИ в инженерные процессы.

Открыть
AtkinsRéalis

Руководитель инженерного направления по электрооборудованию и КИПиА — атомная энергетика

AtkinsRéalis

Руководите проектированием электрооборудования и систем КИПиА для атомных проектов AtkinsRéalis. Координируйте технические команды, стандарты проектирования, подбор персонала и сложные проекты реакторных установок.

Открыть
Nerdy

Руководитель инженерной команды, удалённо в Индии

Nerdy

Руководите инженерными командами, которые создают и развивают учебную платформу Nerdy для тысяч учащихся. Определяйте техническое направление в архитектуре, ИИ-процессах продукта и автоматизации разработки.

Открыть