Mindrift
Mindrift
Mindrift ir mākslīgā intelekta talantu tirgus un SaaS platforma, kas savieno profesionālus darba veicējus un konkrētu jomu ekspertus ar tehnoloģiju uzņēmumu mākslīgā intelekta apmācības un novērtēšanas projektiem. Kā Toloka daļa tā sadarbojas ar rakstniekiem, redaktoriem, kvalitātes nodrošināšanas speciālistiem, zinātniekiem un citiem jomu ekspertiem, kuri palīdz veidot apmācības datus, novērtēt modeļu drošību un spriestspēju, izvērtēt multivides kvalitāti un radīt reālās pasaules scenārijus mākslīgā intelekta veiktspējas un uzticamības uzlabošanai. Mindrift piesaista un pārbauda darba veicējus, izmantojot novērtējumus un identitātes verifikāciju, pēc tam piedāvājot elastīgas, apmaksātas projektu iespējas mākslīgā intelekta apmācības un novērtēšanas jomā.

Vecākais Python datu izgūšanas inženieris – ārštata darbs, attālināti no Indijas

Mindrift meklē vecāko Python inženieri, kas Tendem AI projektā izgūs, validēs un mērogos strukturētu tīmekļa datu apstrādes darbplūsmas. Darbs ietver Python, mākoņinfrastruktūru, Docker un uz lielajiem valodas modeļiem balstītus automatizācijas ietvarus.

Apraksts

  • Pārvaldīt pilnas datu izgūšanas darbplūsmas sarežģītās tīmekļa vietnēs
  • Piegādāt strukturētas datu kopas ar visaptverošu pārklājumu, augstu precizitāti un uzticamu izpildes laiku
  • Izmantot specializētus rīkus un pielāgotas darbplūsmas, lai paātrinātu datu vākšanu, validāciju un uzdevumu izpildi
  • Iegūt informāciju no dinamiskiem un interaktīviem avotiem, tostarp JavaScript renderētām lapām
  • Pielāgot izgūšanas metodes, mainoties tīmekļa vietņu darbībai un lapu struktūrām
  • Uzturēt datu kvalitāti, veicot validāciju, avotu savstarpējās pārbaudes, ievērojot formatēšanas standartus un sistemātiski pārskatot datus
  • Mērogot liela apjoma izgūšanu, izmantojot efektīvu pakešu apstrādi un paralēlu apstrādi
  • Sekot kļūmēm un palīdzēt nodrošināt uzticamu un stabilu izgūšanu
  • Pielietot Python, tīmekļa izgūšanas, datu iegūšanas un datu apstrādes zināšanas Tendem projektā

Prasības

  • Vismaz 5 gadu atbilstoša pieredze datu inženierijā, tīmekļa izgūšanā, automatizācijā vai programmatūras izstrādē
  • Bakalaura vai maģistra grāds inženierzinātnēs, lietišķajā matemātikā, datorzinātnēs vai saistītā tehniskā jomā tiks uzskatīts par priekšrocību
  • Spēcīgs praktiskais pamats skriptu veidošanā, automatizācijā un datu izgūšanas darbplūsmās
  • Padziļināta Python izgūšanas pieredze ar BeautifulSoup, Selenium vai līdzīgiem rīkiem, dinamisku saturu un uz starpniekserveriem balstītām API
  • Spēja iegūt informāciju no sarežģītām struktūrām, tostarp hierarhijām, arhivētām lapām un nekonsekventa HTML
  • Plaša pieredze datu tīrīšanā, normalizēšanā un validēšanā
  • Praktiska pieredze pretbotu aizsardzības mehānismu un dinamisku tīmekļa vietņu struktūru pārvaldībā lielā mērogā
  • Pieredze ar AWS vai līdzīgu mākoņinfrastruktūru un Docker konteinerizāciju
  • Praktiska LangChain, OpenRouter vai līdzīgu lielo valodas modeļu ietvaru izmantošana automatizācijai
  • Rūpīga pieeja datu precizitātei un kvalitātei
  • Spēja strādāt patstāvīgi, novērst problēmas un proaktīvi pārvaldīt uzdevumus
  • Angļu valodas zināšanas vismaz augstākajā vidējā līmenī (B2)
  • GitHub saite tiks uzskatīta par priekšrocību

Priekšrocības

  • Ārštata darbs
  • Nepilna laika attālināts darbs no Indijas
  • Aktīvās projekta fāzēs aptuveni 10–20 stundas nedēļā
  • Iespējas strādāt tehnoloģiju projektos, izmantojot Mindrift platformu
  • Atlīdzība līdz 30 ASV dolāru ekvivalentam stundā atkarībā no pieredzes līmeņa un ieguldījuma tempa

Saistītās vakances

RecruitGo

Remote Executive Assistant, Outreach and Marketing — Philippines

RecruitGo

Handle administrative support, CRM, outreach, and marketing for RecruitGo, an Employer of Record serving global clients with talent from emerging markets. Support two UK-facing clients with day-to-day administration and creative campaigns.

Atvērt