Mindrift
Mindrift
501 – 1 000 Darbuotojai
Dirbtinis intelektasPrekyvietėSaaS
„Mindrift“ yra dirbtinio intelekto talentų rinkos ir SaaS platforma, jungianti profesionalius dalyvius bei konkrečių sričių ekspertus su technologijų įmonių dirbtinio intelekto mokymo ir vertinimo projektais. Būdama „Toloka“ dalimi, ji bendradarbiauja su rašytojais, redaktoriais, kokybės užtikrinimo specialistais, mokslininkais ir kitais sričių ekspertais, kurie padeda kurti mokymo duomenis, vertinti modelių saugumą ir gebėjimą samprotauti, vertinti medijos kokybę bei kurti realaus pasaulio scenarijus, skirtus dirbtinio intelekto našumui ir patikimumui gerinti. „Mindrift“ įdarbina ir tikrina dalyvius atlikdama vertinimus bei patvirtindama jų tapatybę, o vėliau siūlo lanksčias mokamas projektų galimybes dirbtinio intelekto mokymo ir vertinimo srityse.

Vyresnysis Python duomenų rinkimo inžinierius Meksikoje (nuotolinis darbas)

Kurkite ir plėskite patikimas žiniatinklio duomenų rinkimo darbo eigas, skirtas „Mindrift“ DI platformai. Išgaukite, patikrinkite ir pateikite struktūrizuotus duomenis iš sudėtingų bei dinaminių svetainių.

Aprašymas

  • Valdykite visą duomenų išgavimo iš sudėtingų svetainių procesą ir pateikite išsamius, tikslius bei patikimus struktūrizuotus duomenų rinkinius.
  • Naudokite prieinamus įrankius ir pasirinktines darbo eigas, kad paspartintumėte duomenų rinkimą, tikrinimą ir užduočių vykdymą pagal nustatytus reikalavimus.
  • Patikimai išgaukite duomenis iš dinaminių ir interaktyvių šaltinių, prisitaikydami prie „JavaScript“ sugeneruoto turinio ir besikeičiančio svetainių veikimo.
  • Užtikrinkite duomenų kokybę atlikdami tikrinimus, vertindami skirtingų šaltinių nuoseklumą, laikydamiesi formatavimo reikalavimų ir sistemingai tikrindami duomenis prieš pateikimą.
  • Plėskite didelės apimties duomenų rinkimą naudodami efektyvų paketų apdorojimą ir lygiagretųjį apdorojimą.
  • Stebėkite duomenų išgavimo klaidas ir palaikykite veiklos stabilumą, kai svetainių struktūros šiek tiek keičiasi.
  • Dirbkite su „Tendem“ agentais, atliekančiais pasikartojančias užduotis „Mindrift“ hibridiniame DI ir žmonių darbo modelyje.
  • Naudokite „Apify“, „OpenRouter“ ir kitas technologijas kartu su techninėmis žiniomis bei pritaikytais metodais.
  • Pasitelkite žiniatinklio duomenų rinkimo, duomenų išgavimo ir duomenų apdorojimo kompetenciją, kad gautumėte tikslius, patikimus ir kokybiškus rezultatus.

Reikalavimai

  • Reikalaujama bent penkerių metų atitinkamos patirties duomenų inžinerijos, žiniatinklio duomenų rinkimo, automatizavimo arba programinės įrangos kūrimo srityje.
  • Inžinerijos, taikomosios matematikos, informatikos ar susijusios techninės krypties bakalauro arba magistro laipsnis būtų privalumas.
  • Tvirta Python duomenų rinkimo patirtis naudojant „BeautifulSoup“, „Selenium“ ar panašius įrankius, įskaitant „JavaScript“, AJAX, begalinį slinkimą ir per tarpinius serverius naudojamas API.
  • Gebėjimas išgauti informaciją iš sudėtingų struktūrų, tokių kaip hierarchijos, archyvuoti puslapiai ir nenuoseklus HTML.
  • Praktinė duomenų valymo, normalizavimo ir tikrinimo patirtis, reikalinga struktūrizuotam pateikimui CSV, JSON arba „Google Sheets“ formatu.
  • Patirtis valdant apsaugos nuo robotų priemones ir besikeičiančias svetainių struktūras dideliu mastu.
  • Praktinė AWS ar panašios debesijos infrastruktūros bei „Docker“ naudojimo patirtis gamybinėse darbo eigose.
  • Patirtis taikant DI kalbos modelių sistemas, tokias kaip „LangChain“ ar „OpenRouter“, automatizavimo užduotims.
  • Išskirtinis dėmesys detalėms ir nuolatinis dėmesys duomenų tikslumui.
  • Gebėjimas dirbti savarankiškai, tirti problemas ir veiksmingai šalinti triktis.
  • Reikalaujamas aukštesnis nei vidutinis anglų kalbos mokėjimas, atitinkantis B2 ar aukštesnį lygį.
  • „GitHub“ profilio nuoroda būtų privalumas.

Privalumai

  • Laisvai samdomo darbuotojo veikla.
  • Darbas ne visą darbo dieną nuotoliniu būdu.
  • Aktyviais projekto etapais numatoma apie 10–20 valandų per savaitę.

Susiję darbai