Mindrift
Mindrift
501 – 1 000 Darbuotojai
Dirbtinis intelektasPrekyvietėSaaS
„Mindrift“ yra dirbtinio intelekto talentų rinkos ir SaaS platforma, jungianti profesionalius dalyvius bei konkrečių sričių ekspertus su technologijų įmonių dirbtinio intelekto mokymo ir vertinimo projektais. Būdama „Toloka“ dalimi, ji bendradarbiauja su rašytojais, redaktoriais, kokybės užtikrinimo specialistais, mokslininkais ir kitais sričių ekspertais, kurie padeda kurti mokymo duomenis, vertinti modelių saugumą ir gebėjimą samprotauti, vertinti medijos kokybę bei kurti realaus pasaulio scenarijus, skirtus dirbtinio intelekto našumui ir patikimumui gerinti. „Mindrift“ įdarbina ir tikrina dalyvius atlikdama vertinimus bei patvirtindama jų tapatybę, o vėliau siūlo lanksčias mokamas projektų galimybes dirbtinio intelekto mokymo ir vertinimo srityse.

Vyresnysis Python duomenų rinkimo inžinierius — nuotolinis darbas iš Filipinų

„Mindrift“ ieško vyresniojo Python inžinieriaus, kuris kurtų patikimus duomenų rinkimo procesus dirbtinio intelekto projektams. Šiose pareigose daugiausia dėmesio skiriama struktūrizuotų duomenų iš sudėtingų ir dinamiškų svetainių išgavimui, tikrinimui ir mastelio didinimui.

Aprašymas

  • Valdyti visus duomenų išgavimo procesus sudėtingose svetainėse
  • Kurti išsamius, tikslius ir patikimus struktūrizuotus duomenų rinkinius
  • Taikyti įrankius ir pritaikytus procesus, kad būtų paspartintas duomenų rinkimas, tikrinimas ir užduočių pateikimas
  • Rinkti informaciją iš dinaminių ir interaktyvių šaltinių, įskaitant puslapius, sugeneruotus naudojant „JavaScript“
  • Koreguoti duomenų rinkimo metodus keičiantis svetainių veikimui ir struktūrai
  • Užtikrinti duomenų kokybę atliekant tikrinimą, lyginant skirtingus šaltinius, taikant formatavimo taisykles ir sistemingai peržiūrint duomenis
  • Didinti didelės apimties duomenų rinkimo mastą naudojant efektyvų paketų apdorojimą ir lygiagretųjį apdorojimą
  • Stebėti išgavimo klaidas ir išlaikyti procesų stabilumą atliekant nedidelius svetainių pakeitimus

Reikalavimai

  • Bent penkerių metų atitinkama duomenų inžinerijos, žiniatinklio duomenų rinkimo, automatizavimo arba programinės įrangos kūrimo patirtis
  • Pageidautinas inžinerijos, taikomosios matematikos, informatikos ar susijusios techninės krypties bakalauro arba magistro laipsnis
  • Puiki Python duomenų rinkimo patirtis naudojant „BeautifulSoup“, „Selenium“ ar panašius įrankius, dirbant su dinaminiu turiniu ir per tarpinius serverius naudojamomis API
  • Gebėjimas išgauti informaciją iš sudėtingų šaltinių, pavyzdžiui, hierarchijų, archyvuotų puslapių ir nenuoseklaus HTML
  • Gebėjimas išvalyti, normalizuoti ir patikrinti duomenis, skirtus pateikti CSV, JSON arba „Google Sheets“ formatu
  • Gebėjimas valdyti apsaugas nuo robotų ir kintančias svetainių struktūras didelės apimties duomenų rinkimo projektuose
  • AWS arba panašios debesijos infrastruktūros ir „Docker“ pagrindu veikiančio konteinerizavimo naudojimo patirtis
  • LLM sistemų, tokių kaip „LangChain“, „OpenRouter“ ar panašių įrankių, taikymas automatizavimo procesuose
  • Išskirtinis dėmesys detalėms ir nuoseklus dėmesys duomenų tikslumui
  • Gebėjimas dirbti savarankiškai, diagnozuoti ir spręsti technines problemas
  • Anglų kalbos mokėjimas ne žemesniu nei aukštesniu vidutiniu lygiu (B2)

Privalumai

  • Darbas pagal laisvai samdomo specialisto projektą
  • Ne visos darbo dienos nuotolinis darbas
  • Aktyvių projektų laikotarpiais maždaug 10–20 valandų per savaitę
  • Atlygis iki 30 JAV dolerių per valandą ekvivalentu, priklausomai nuo patirties lygio ir indėlio tempo

Susiję darbai

TÜV TRUST IT Unternehmensgruppe TÜV AUSTRIA

Junior Security Auditor, Electronic Identities and Trust Services

TÜV TRUST IT Unternehmensgruppe TÜV AUSTRIA

Advise on and audit electronic identities and trust services for TÜV’s information security certification work. Assess security controls, report findings, and coordinate complex compliance projects.

Atidaryti