Mindrift
Mindrift
Mindrift — це маркетплейс фахівців зі штучного інтелекту та SaaS-платформа, яка поєднує професійних учасників і експертів у різних предметних галузях із проєктами технологічних компаній у сфері навчання та оцінювання ШІ. Як частина Toloka, компанія співпрацює з авторами, редакторами, фахівцями із забезпечення якості, науковцями та іншими галузевими експертами, які допомагають створювати навчальні дані, оцінювати безпеку й здатність моделей до міркування, перевіряти якість медіаконтенту та розробляти реалістичні сценарії для покращення продуктивності й надійності ШІ. Mindrift залучає та перевіряє учасників за допомогою оцінювань і верифікації особи, а потім пропонує гнучкі оплачувані проєкти у сфері навчання та оцінювання ШІ.

Провідний інженер зі збору даних на Python — віддалена робота в Індії

Провідний Python-інженер відповідатиме за створення надійних процесів збору даних для AI-проєкту Tendem компанії Mindrift. Роль зосереджена на вилученні, перевірці та масштабуванні структурованих даних зі складних динамічних вебсайтів.

Опис

  • Керувати повними процесами вилучення даних зі складних вебсайтів, забезпечуючи широке охоплення, точність і надійну передачу структурованих наборів даних.
  • Використовувати доступні інструменти та адаптовані робочі процеси для покращення збору й перевірки даних, а також виконання завдань відповідно до визначених вимог.
  • Надійно вилучати дані з динамічних та інтерактивних джерел, адаптуючись до контенту, що відображається за допомогою JavaScript, і змін у поведінці вебсайтів.
  • Підтримувати якість даних за допомогою перевірок, зіставлення різних джерел, контролю форматування та систематичної верифікації перед передачею.
  • Масштабувати збір великих обсягів даних завдяки ефективній пакетній обробці та паралельному виконанню.
  • Відстежувати помилки вилучення та зберігати стабільність робочих процесів у разі незначних змін структури вебсайтів.
  • Застосовувати експертизу у вебскрейпінгу, вилученні та обробці даних до практичних завдань у межах проєкту Tendem.

Вимоги

  • Понад 5 років релевантного досвіду в інженерії даних, вебскрейпінгу, автоматизації або розробці програмного забезпечення.
  • Впевнений досвід збору даних на Python із використанням BeautifulSoup, Selenium або подібних інструментів, зокрема JavaScript, AJAX, нескінченної прокрутки та доступу до API через проксі.
  • Уміння вилучати інформацію зі складних структур, таких як ієрархії, архівні сторінки та HTML із непослідовною структурою.
  • Практичний досвід очищення, нормалізації та перевірки даних для передачі у форматах CSV, JSON або Google Sheets.
  • Досвід роботи із заходами проти ботів і змінами структури сайтів у масштабних процесах збору даних.
  • Практичний досвід роботи з AWS або аналогічною хмарною інфраструктурою та контейнеризацією на основі Docker у виробничих процесах.
  • Досвід застосування LLM-фреймворків, таких як LangChain, OpenRouter або подібних інструментів, у завданнях автоматизації.
  • Висока увага до деталей і послідовна зосередженість на точності даних.
  • Здатність працювати самостійно, досліджувати проблеми та ефективно усувати несправності.
  • Англійська мова на рівні Upper-Intermediate, B2 або вище.

Переваги

  • Фрилансова співпраця.
  • Віддалена робота з Індії на умовах неповної зайнятості.
  • Приблизно 10–20 годин на тиждень під час активних фаз проєкту.

Схожі вакансії

Rubikal

Початківець-розробник програмного забезпечення в Rubikal — гібридна робота в Єгипті

Rubikal
51 – 200 Працівники
SaaSКонсалтингМаркетинг

Створюйте та вдосконалюйте повнофункціональні застосунки для клієнтів Rubikal на посаді початківця-розробника програмного забезпечення. Беріть участь у проєктуванні, тестуванні, перевірці коду та розробленні масштабованих програмних рішень.

Відкрити
Hewlett Packard Enterprise

Розробник навчальних матеріалів Aruba у HPE (віддалена робота в Мексиці)

Hewlett Packard Enterprise

Розробляйте технічні навчальні матеріали для клієнтів щодо хмарних продуктів, автоматизації та керування HPE Aruba Networking. Створюйте модулі курсів, документацію та вбудовані підказки для мережевих клієнтів.

Відкрити
Mindrift

Старший інженер із вебскрейпінгу на Python — віддалена робота в Бразилії

Mindrift

Старший Python-інженер відповідає за надійний вебскрейпінг, перевірку даних і передавання структурованих наборів даних для технологічних AI-проєктів Mindrift. Робота охоплює динамічні сайти, антибот-системи, хмарну інфраструктуру та інструменти автоматизації на основі LLM.

Відкрити
Mindrift

Старший інженер зі збору даних на Python — фриланс, віддалено з Польщі

Mindrift

Mindrift шукає досвідченого Python-інженера для створення надійних процесів вебскрейпінгу для проєктів у сфері ШІ. Роль передбачає вилучення, перевірку й обробку структурованих даних зі складних динамічних вебсайтів.

Відкрити
Mindrift

Старший інженер зі збору даних на Python — віддалено в Румунії

Mindrift

Старший Python-інженер, відповідальний за створення надійних процесів вебскрейпінгу та обробки даних для AI-проєкту Tendem компанії Mindrift. Роль передбачає вилучення, перевірку й масштабування структурованих наборів даних зі складних вебсайтів.

Відкрити
Hewlett Packard Enterprise

Розробник навчальних матеріалів Aruba (дистанційно з Мексики)

Hewlett Packard Enterprise

Розробляйте навчальні матеріали та технічний контент для клієнтів щодо продуктів HPE Aruba Networking. Перетворюйте складні технології хмарних обчислень, автоматизації та мереж на практичні матеріали для клієнтів.

Відкрити
Hewlett Packard Enterprise

Розробник навчальних матеріалів Aruba (віддалено, Мексика)

Hewlett Packard Enterprise

Розробляйте орієнтовані на клієнтів навчальні матеріали й технічний контент для продуктів HPE Aruba Networking. Перетворюйте складні хмарні технології, автоматизацію та мережеві рішення на практичні навчальні матеріали.

Відкрити
Hewlett Packard Enterprise

Розробник навчальних матеріалів Aruba — віддалена робота в Мексиці

Hewlett Packard Enterprise

Розробляйте технічні навчальні матеріали та контент для навчання клієнтів щодо хмарних продуктів, автоматизації й керування HPE Networking. Перетворюйте складні концепції мереж на зрозумілі та практичні матеріали для клієнтів.

Відкрити
Hewlett Packard Enterprise

Розробник навчальних матеріалів Aruba — віддалена робота в Мексиці

Hewlett Packard Enterprise

Розробляйте орієнтовані на клієнтів навчальні матеріали й технічний контент для хмарних продуктів HPE Aruba Networking, автоматизації та керування. Перетворюйте складні мережеві технології на практичну документацію та навчальні матеріали.

Відкрити
Hewlett Packard Enterprise

Розробник навчальних матеріалів Aruba — віддалена робота в Мексиці

Hewlett Packard Enterprise

Розробляйте навчальні матеріали й технічну документацію для клієнтів щодо продуктів HPE Aruba Networking. Перетворюйте складні концепції хмарних технологій, автоматизації та керування мережами на зрозумілий навчальний контент.

Відкрити