Mindrift
Mindrift
Mindrift — это маркетплейс специалистов в области искусственного интеллекта и SaaS-платформа, которая связывает профессиональных участников и экспертов в различных предметных областях с проектами технологических компаний по обучению и оценке ИИ. Будучи частью Toloka, компания сотрудничает с авторами, редакторами, специалистами по обеспечению качества, учёными и другими профильными экспертами, которые помогают создавать обучающие данные, оценивать безопасность и способность моделей к рассуждению, проверять качество медиаконтента и разрабатывать реалистичные сценарии для повышения эффективности и надёжности ИИ. Mindrift привлекает и проверяет участников с помощью тестовых заданий и верификации личности, а затем предлагает гибкие оплачиваемые проекты в сфере обучения и оценки ИИ.

Старший инженер по сбору данных на Python (фриланс, удалённо в Египте)

Разрабатывайте надёжные системы сбора данных на Python для ИИ-проектов Mindrift. Извлекайте, проверяйте и масштабируйте структурированные данные со сложных динамических веб-сайтов.

Описание

  • Управлять полными процессами извлечения данных со сложных веб-сайтов
  • Предоставлять полные, точные и надёжные структурированные наборы данных
  • Использовать инструменты и адаптированные рабочие процессы для ускорения сбора и проверки данных, а также выполнения задач
  • Надёжно извлекать данные из динамических, интерактивных источников и источников с рендерингом JavaScript
  • Адаптировать методы сбора данных по мере изменения поведения и структуры веб-сайтов
  • Обеспечивать качество данных с помощью проверки, сопоставления между источниками, стандартов форматирования и систематического контроля
  • Масштабировать сбор больших наборов данных с помощью эффективной пакетной или параллельной обработки
  • Отслеживать ошибки извлечения и поддерживать стабильность при небольших изменениях веб-сайтов
  • Применять знания веб-скрейпинга, извлечения и обработки данных в проекте Tendem

Требования

  • Более 5 лет релевантного опыта в инженерии данных, веб-скрейпинге, автоматизации или разработке программного обеспечения
  • Предпочтительно наличие степени бакалавра или магистра в области инженерии, прикладной математики, компьютерных наук или смежной технической дисциплины
  • Продвинутый опыт скрейпинга на Python с использованием BeautifulSoup, Selenium или сопоставимых инструментов, работы с JavaScript/AJAX-контентом, бесконечной прокруткой, API и прокси
  • Умение извлекать информацию из сложных структур, включая иерархии, архивные страницы и непоследовательный HTML
  • Отличные навыки очистки, нормализации и проверки данных, а также опыт подготовки наборов данных в форматах CSV, JSON или Google Sheets
  • Практический опыт работы с защитой от ботов и изменяющимися структурами веб-сайтов в больших масштабах
  • Опыт работы с AWS или сопоставимой облачной инфраструктурой и контейнеризацией на базе Docker
  • Практический опыт использования фреймворков LLM, таких как LangChain, OpenRouter или аналогичных инструментов, для автоматизации
  • Исключительное внимание к деталям и постоянная сосредоточенность на точности данных
  • Способность работать самостоятельно, устранять неполадки и управлять задачами при минимальном контроле
  • Английский язык на уровне выше среднего (B2) или выше
  • Профиль на GitHub или ссылка на портфолио будут преимуществом

Преимущества

  • Фриланс-проект
  • Частичная занятость — примерно 10–20 часов в неделю в активные фазы проекта
  • Удалённая работа
  • Гибкая нагрузка в соответствии с потребностями проекта

Похожие вакансии

Knowtion Health

Менеджер по подбору персонала (удалённо)

Knowtion Health

Координируйте системы подбора, вакансии, аналитику и работу с временным персоналом в Knowtion Health. Помогайте выстраивать масштабируемые процессы найма для растущей компании в сфере здравоохранения.

Открыть
Napco National

Координатор по закупкам, Саудовская Аравия (удалённо)

Napco National

Координируйте закупки для производственного предприятия в Саудовской Аравии: от заказов и поставок до таможенных документов и перемещения материалов. Помогайте оформлять грузы, обрабатывать счета, предъявлять претензии поставщикам и продлевать сертификаты на продукцию.

Открыть
Artemys

Специалист по подбору IT-специалистов

Artemys

Подбирайте специалистов по IT-инфраструктуре для Artemys, компании в сфере цифровой трансформации. Ведите поиск и найм сотрудников, участвуйте в развитии HR-бренда.

Открыть
4M Analytics

Ведущий инженер по алгоритмам компьютерного зрения

4M Analytics

Разрабатывайте системы компьютерного зрения и машинного обучения для платформы картирования подземных коммуникаций 4M Analytics. Отвечайте за алгоритмы на всех этапах — от исследований до внедрения в производство — совместно с командами инженерии данных и продукта.

Открыть
Joom

Менеджер по успеху корпоративных клиентов, Бразилия (удалённо)

Joom

Ведите продления, удержание и развитие корпоративных клиентов JoomPulse. Превращайте аналитику Mercado Livre и Shopee в практические рекомендации для продавцов на маркетплейсах.

Открыть
Cyera

Региональный директор по продажам в сфере безопасности идентификационных данных

Cyera

Возглавьте команду продаж Cyera на Тихоокеанском Северо-Западе, развивайте территорию и превышайте план продаж платформы безопасности данных и ИИ.

Открыть
Terumo Medical Corporation

Региональный менеджер по продажам Terumo Interventional Systems

Terumo Medical Corporation

Руководите продажами медицинских изделий в регионе Северного и Центрального Нью-Джерси, управляя выездными командами и отношениями с больницами. Развивайте выручку региона, повышайте эффективность продаж и обеспечивайте продвижение продукции Terumo Interventional Systems в соответствии с требованиями.

Открыть
Dream

Старший менеджер программ Sovereign AI (гибридный формат, Израиль)

Dream

Руководите дорожной картой Dream в области суверенного ИИ для государственных заказчиков и критической инфраструктуры, координируя исследования, разработку, продукт, запуски и операции с использованием ИИ.

Открыть
Claroty

Инженер по автоматизации тестирования

Claroty

Разрабатывайте автоматизацию API и пользовательского интерфейса, а также контрольные проверки качества в CI/CD для платформы Claroty по защите киберфизических систем. Помогайте защищать критическую инфраструктуру с помощью надежного тестирования.

Открыть
Fluent Trade Technologies

Специалист по подбору технических специалистов

Fluent Trade Technologies
51 – 200 Сотрудники
Финтех

Подбирайте технических специалистов для международных команд Fluent Trade Technologies, координируя найм в ЕС, Украине и на Филиппинах.

Открыть