Mindrift
Mindrift
Mindrift — це маркетплейс фахівців зі штучного інтелекту та SaaS-платформа, яка поєднує професійних учасників і експертів у різних предметних галузях із проєктами технологічних компаній у сфері навчання та оцінювання ШІ. Як частина Toloka, компанія співпрацює з авторами, редакторами, фахівцями із забезпечення якості, науковцями та іншими галузевими експертами, які допомагають створювати навчальні дані, оцінювати безпеку й здатність моделей до міркування, перевіряти якість медіаконтенту та розробляти реалістичні сценарії для покращення продуктивності й надійності ШІ. Mindrift залучає та перевіряє учасників за допомогою оцінювань і верифікації особи, а потім пропонує гнучкі оплачувані проєкти у сфері навчання та оцінювання ШІ.

Старший інженер зі збору даних на Python у Мексиці (віддалено)

Створюйте та масштабуйте надійні процеси вебскрейпінгу для ШІ-платформи Mindrift. Витягуйте, перевіряйте й передавайте структуровані дані зі складних динамічних сайтів.

Опис

  • Вести процеси вилучення даних на всіх етапах роботи зі складними вебсайтами, надаючи повні, точні та надійні структуровані набори даних.
  • Використовувати доступні інструменти й індивідуальні робочі процеси для прискорення збору, перевірки та виконання завдань відповідно до визначених вимог.
  • Надійно вилучати дані з динамічних та інтерактивних джерел, адаптуючись до контенту, що відображається за допомогою JavaScript, і змін у поведінці сайтів.
  • Підтримувати якість даних за допомогою перевірок, аналізу узгодженості між джерелами, дотримання вимог до форматування та систематичної перевірки перед передаванням результатів.
  • Масштабувати збір великих обсягів даних завдяки ефективній пакетній обробці та паралельному виконанню.
  • Відстежувати збої вилучення та зберігати стабільність роботи за незначних змін структури сайтів.
  • Працювати з Tendem Agents, які виконують повторювані завдання в межах гібридної операційної моделі Mindrift, що поєднує ШІ та людей.
  • Застосовувати Apify, OpenRouter та інші технології разом із технічною експертизою й адаптованими методами.
  • Використовувати експертизу у вебскрейпінгу, вилученні та обробці даних для отримання точних, надійних і якісних результатів.

Вимоги

  • Потрібно щонайменше п’ять років релевантного досвіду в інженерії даних, вебскрейпінгу, автоматизації або розробці програмного забезпечення.
  • Ступінь бакалавра або магістра в галузі інженерії, прикладної математики, комп’ютерних наук або суміжної технічної дисципліни буде перевагою.
  • Ґрунтовний досвід скрейпінгу на Python із використанням BeautifulSoup, Selenium або аналогічних інструментів, зокрема робота з JavaScript, AJAX, нескінченною прокруткою та API через проксі.
  • Здатність вилучати інформацію зі складних структур, таких як ієрархії, архівні сторінки та нестандартний HTML.
  • Практичний досвід очищення, нормалізації та перевірки даних для структурованого передавання у форматах CSV, JSON або Google Sheets.
  • Досвід роботи із захистом від ботів і змінними структурами сайтів у великих масштабах.
  • Практичний досвід використання AWS або аналогічної хмарної інфраструктури та Docker у виробничих процесах.
  • Досвід застосування фреймворків LLM, таких як LangChain або OpenRouter, для завдань автоматизації.
  • Виняткова увага до деталей і послідовна орієнтація на точність даних.
  • Здатність працювати самостійно, досліджувати проблеми та ефективно усувати несправності.
  • Потрібне знання англійської мови на рівні B2 або вище.
  • Посилання на профіль GitHub буде перевагою.

Переваги

  • Фрилансова співпраця.
  • Віддалена робота на неповний робочий день.
  • Орієнтовно 10–20 годин на тиждень під час активних етапів проєкту.

Схожі вакансії

F5

Старший менеджер з договорів SaaS і хмарних сервісів

F5

Керуйте договорами на SaaS, хмарні й технологічні послуги в компанії F5, що спеціалізується на кібербезпеці. Розвивайте масштабовані договірні процеси у співпраці з юридичною командою, відділами продажів, фінансів та інформаційної безпеки.

Відкрити
F5

Старший менеджер із контрактів у сфері SaaS і хмарних технологій

F5

Ведіть переговори щодо угод у сфері SaaS, хмарних і технологічних послуг, підтримуючи бізнес F5 у сфері кібербезпеки. Розвивайте масштабовані процеси укладання контрактів разом із юридичними, комерційними, фінансовими командами та фахівцями з безпеки.

Відкрити
Cerebrocare

Двомовний координатор запису до неврологічної клініки

Cerebrocare
51 – 200 Працівники
B2BSaaSОхорона здоров'я

Координація прийомів, направлень, первинного збору даних пацієнтів та електронних медичних карт для неврологічних клінік США. Робота в Монтерреї у гібридному форматі, щопонеділка — з дому.

Відкрити
Eventogy

Інженер-продуктовик (фронтенд і повний стек)

Eventogy

Розвивайте платформу Eventogy для керування подіями на Next.js, React, TypeScript і Laravel: від інструментів адміністрування та сайтів для учасників до API. Створюйте функції за допомогою ШІ для корпоративних клієнтів із регульованих галузей.

Відкрити
Creative information Technology

Старший Java-розробник, робота в офісі у Вірджинії

Creative information Technology

Розробляйте масштабовані мікросервіси на Java для CITI — постачальника ІТ-послуг державним і комерційним клієнтам. Створюйте захищені застосунки для керування ідентифікацією, обліковими даними та доступом.

Відкрити
Construo

Старший інженер даних з агентної розробки

Construo

Створюйте конвеєри даних, моделі та ETL-сервіси за допомогою ШІ для міжнародного клієнта з фінансового сектору. Керуйте кодом, згенерованим агентами, у Databricks, dbt, SQL, Python і CI/CD.

Відкрити
Construo

Старший інженер даних з агентної розробки

Construo

Створюйте конвеєри даних, моделі й сервіси за допомогою ШІ для міжнародного клієнта з фінансового сектору. Застосовуйте агентні практики розробки, CI/CD і підходи до забезпечення якості даних.

Відкрити
+A Educação

Інженер даних AWS і сховищ даних

+A Educação
501 – 1 000 Працівники
AR/VRSaaSОсвіта

Створюйте сховища даних, озера даних і конвеєри для +A Educação. Підтримуйте інфраструктуру AWS і стратегічні дані в бразильській освітній екосистемі.

Відкрити
SOFTETA

Інженер із тестування даних

SOFTETA
11 – 50 Працівники
B2BSaaSКонсалтинг

Перевіряйте якість даних, перетворення та ETL/ELT-процеси. SOFTETA створює програмне забезпечення на замовлення, рішення для автоматизації та ШІ для фінансів та інших галузей із високими вимогами до надійності.

Відкрити
CrowdStrike

Інженер III — хмарна автентифікація й авторизація

CrowdStrike

Створюйте сервіси автентифікації й авторизації для глобальної платформи кібербезпеки CrowdStrike. Керуйте розробкою розподілених серверних систем із використанням Go, AWS, Kafka та суміжних технологій.

Відкрити