Mindrift
Mindrift
Mindrift — это маркетплейс специалистов в области искусственного интеллекта и SaaS-платформа, которая связывает профессиональных участников и экспертов в различных предметных областях с проектами технологических компаний по обучению и оценке ИИ. Будучи частью Toloka, компания сотрудничает с авторами, редакторами, специалистами по обеспечению качества, учёными и другими профильными экспертами, которые помогают создавать обучающие данные, оценивать безопасность и способность моделей к рассуждению, проверять качество медиаконтента и разрабатывать реалистичные сценарии для повышения эффективности и надёжности ИИ. Mindrift привлекает и проверяет участников с помощью тестовых заданий и верификации личности, а затем предлагает гибкие оплачиваемые проекты в сфере обучения и оценки ИИ.

Ведущий инженер по сбору данных на Python — фриланс, удалённая работа из Индии

Mindrift ищет ведущего инженера по Python для извлечения, проверки и масштабирования рабочих процессов со структурированными веб-данными в рамках проекта Tendem AI. Работа включает Python, облачную инфраструктуру, Docker и фреймворки автоматизации на основе LLM.

Описание

  • Управлять полными рабочими процессами извлечения данных со сложных веб-сайтов
  • Предоставлять структурированные наборы данных с полным охватом, высокой точностью и соблюдением сроков
  • Использовать специализированные инструменты и адаптированные рабочие процессы для ускорения сбора, проверки и выполнения задач
  • Извлекать информацию из динамических и интерактивных источников, включая страницы, отрисовываемые JavaScript
  • Адаптировать методы сбора данных по мере изменения поведения веб-сайтов и структуры страниц
  • Поддерживать качество данных с помощью проверки, сопоставления между источниками, стандартов форматирования и систематического контроля
  • Масштабировать сбор больших объёмов данных с помощью эффективной пакетной обработки и параллельного выполнения
  • Отслеживать сбои и поддерживать надёжную и стабильную работу процессов сбора данных
  • Применять знания Python, веб-скрейпинга, извлечения и обработки данных в проекте Tendem

Требования

  • Более 5 лет релевантного опыта в инженерии данных, веб-скрейпинге, автоматизации или разработке программного обеспечения
  • Диплом бакалавра или магистра в области инженерии, прикладной математики, информатики или другой технической сфере будет преимуществом
  • Прочная практическая база в написании скриптов, автоматизации и рабочих процессах извлечения данных
  • Продвинутый опыт скрейпинга на Python с использованием BeautifulSoup, Selenium или сопоставимых инструментов, работы с динамическим контентом и API на основе прокси
  • Умение извлекать информацию из сложных структур, включая иерархии, архивные страницы и несогласованный HTML
  • Обширный опыт очистки, нормализации и проверки данных
  • Практический опыт работы с антибот-защитой и динамическими структурами веб-сайтов в больших масштабах
  • Опыт работы с AWS или сопоставимой облачной инфраструктурой и контейнеризацией Docker
  • Практический опыт использования LangChain, OpenRouter или аналогичных LLM-фреймворков для автоматизации
  • Внимательное отношение к точности и качеству данных
  • Умение работать самостоятельно, устранять неполадки и проактивно управлять задачами
  • Английский язык на уровне выше среднего (B2) или выше
  • Ссылка на GitHub будет преимуществом

Преимущества

  • Фриланс-сотрудничество
  • Удалённая работа на неполный рабочий день из Индии
  • Примерно 10–20 часов в неделю на активных этапах проекта
  • Возможность работать над технологическими проектами через платформу Mindrift
  • Оплата в эквиваленте до 30 долларов США в час в зависимости от уровня опыта и темпа вклада

Похожие вакансии

TD

Помощник руководителя I в TD Bank

TD

Оказывайте административную поддержку руководителям TD Bank: координируйте расписание, расходы и коммуникации, работайте с конфиденциальной информацией. Помогайте поддерживать порядок и эффективность офисных и командных процессов.

Открыть
Penn Information Systems & Computing

Администратор казначейских услуг

Penn Information Systems & Computing
201 – 500 Сотрудники
APIB2BПредприятие

Поддержка казначейских операций Пенсильванского университета: банковские операции, депозиты, сверки и платежи. Участие в поддержании финансового контроля и ответах на запросы подразделений университета.

Открыть
Space NK

Ассистент отдела административной поддержки мерчандайзинга в Space NK

Space NK

Поддержка заказов на закупку, торговой отчётности и анализа запасов для бьюти-ритейлера Space NK. Координация поставок, тестеров и запусков новых продуктов.

Открыть
Wolters Kluwer

Специалист по административной поддержке, гибридный формат, Варшава

Wolters Kluwer

Оказывайте административную поддержку командам Wolters Kluwer: ведите документы и переписку, организуйте поездки, расходы и мероприятия. Полная занятость в гибридном формате в Польше; требуется свободное владение польским и английским языками.

Открыть
Just Go - Agency Travel

Внештатный администратор путешествий

Just Go - Agency Travel

Независимый турагент составляет индивидуальные маршруты, бронирует поездки, взаимодействует с поставщиками и помогает клиентам. Гибкий график и возможность работать из любой точки мира.

Открыть
Westinghouse Electric Company

Администратор платформы CLM

Westinghouse Electric Company

Администрирование и развитие платформы управления жизненным циклом договоров Westinghouse Electric Company для кадровых решений в сфере чистой энергетики. Настройка рабочих процессов, доступа, отчетности, средств контроля соответствия и интеграций совместно с командами компании.

Открыть
DaVita Kidney Care

Администратор по маркетингу партнёрских программ

DaVita Kidney Care

Продвигайте медицинские планы, связанные с DaVita, напрямую пациентам в диализных клиниках Южной Калифорнии. Помогайте пациентам разобраться в планах и оформить участие, соблюдая правила маркетинга.

Открыть
CorePower Yoga

Администратор стойки регистрации, студия Gramercy

CorePower Yoga

Встречайте учеников и поддерживайте повседневную работу студии CorePower Yoga в районе Gramercy. В обязанности входят регистрация посетителей, продажи, уход за студией, а также её открытие и закрытие.

Открыть
CVS Health

Старший исполнительный ассистент, операции CVS Health PBM

CVS Health

Оказывать административную поддержку руководителям CVS Health PBM, координируя календари, поездки, мероприятия, бюджеты и конфиденциальные рабочие процессы. Обеспечивать бесперебойную работу руководства благодаря взаимодействию между командами и контролю выполнения задач.

Открыть
DISCO

Исполнительный ассистент директора по технологиям и продуктам и старшего вице-президента по операционной деятельности

DISCO

Поддержка руководителей DISCO: расписание, поездки, проекты и отчетность. Участие в работе над юридическими технологиями на базе ИИ и электронным раскрытием доказательств.

Открыть