Mindrift
Mindrift
501 – 1000 Töötajad
SaaSTehisintellektTuruplats
Mindrift on tehisintellekti valdkonna talenditurg ja SaaS-platvorm, mis ühendab professionaalsed panustajad ja valdkonnaeksperdid tehnoloogiaettevõtete tehisintellekti treenimise ja hindamise projektidega. Toloka osana teeb see koostööd kirjutajate, toimetajate, kvaliteedikontrolli spetsialistide, teadlaste ja teiste ainevaldkonnaekspertidega, kes aitavad luua treeningandmeid, hinnata mudelite ohutust ja arutlusvõimet, hinnata meedia kvaliteeti ning luua tegeliku elu olukordi tehisintellekti jõudluse ja töökindluse parandamiseks. Mindrift värbab ja kontrollib panustajaid hindamiste ning isikusamasuse tuvastamise kaudu, seejärel pakub paindlikke tasustatud projektivõimalusi tehisintellekti treenimise ja hindamise valdkonnas.

Vanem Pythoniga veebikaapimise insener – kaugtöö Brasiiliast

Vanem Pythoniga tegelev insener vastutab usaldusväärse veebikaapimise, andmete valideerimise ja struktureeritud andmekogumite edastamise eest Mindrifti tehisintellekti tehnoloogiaprojektides. Töö hõlmab dünaamilisi veebisaite, robotivastaseid süsteeme, pilvetaristut ja suurte keelemudelite põhiseid automatiseerimistööriistu.

Kirjeldus

  • Juhi täielikke andmete eraldamise töövooge keerukatel veebisaitidel
  • Edasta struktureeritud andmekogumeid, mille katvus on põhjalik, täpsus kõrge ja valmimine usaldusväärne
  • Kasuta olemasolevaid tööriistu ja kohandatud töövooge andmekogumise, valideerimise ja ülesannete täitmise kiirendamiseks
  • Eralda teavet dünaamilistest ja interaktiivsetest allikatest, sealhulgas JavaScriptiga renderdatud lehtedelt
  • Kohanda kaapimismeetodeid vastavalt veebisaidi käitumise muutumisele
  • Hoia andmete kvaliteeti valideerimise, eri allikate vahelise kontrolli, vormingunõuete ja süstemaatilise kontrollimise abil
  • Skaleeri suuremahulist kaapimist tõhusa pakktöötluse või paralleeltöötluse abil
  • Jälgi tõrkeid ja säilita stabiilsus veebisaidi struktuuri väikeste muudatuste korral
  • Integreeri Apify, OpenRouteri ja nendega seotud tehnoloogiate tööriistu kaapimis- ja töötlemise töövoogudesse

Nõuded

  • Vähemalt viis aastat asjakohast kogemust andmeinseneeria, veebikaapimise, automatiseerimise või tarkvaraarenduse alal
  • Inseneriteaduse, rakendusmatemaatika, arvutiteaduse või seotud tehnilise eriala bakalaureuse- või magistrikraad tuleb kasuks
  • Tugev tehniline põhioskuste pagas ning praktiline kogemus skriptimise, automatiseerimise ja andmete eraldamise töövoogudega
  • Põhjalik Pythoni-põhise kaapimise kogemus BeautifulSoupiga, Seleniumiga või võrreldavate tööriistadega, dünaamilise sisu ja puhverserveripõhiste API-dega
  • Oskus eraldada teavet keerukatest struktuuridest, sealhulgas hierarhiatest, arhiveeritud lehtedelt ja ebaühtlasest HTML-ist
  • Kindel kogemus andmete puhastamise, normaliseerimise ja valideerimisega
  • Tõestatud võime hallata robotivastaseid süsteeme ja dünaamilisi veebisaidistruktuure suures mahus
  • Kogemus AWS-i või võrreldava pilvetaristu ja Dockeri konteineriseerimisega
  • Praktiline kogemus LangChaini, OpenRouteri või sarnaste suurte keelemudelite raamistike rakendamisel automatiseerimisülesannetes
  • Väga hea tähelepanelikkus ja pühendumus andmete täpsusele
  • Iseseisev tööviis ja võime probleeme omal käel lahendada
  • Inglise keele vähemalt ülemise kesktaseme oskus (B2)
  • GitHubi profiili link tuleb kasuks

Hüved

  • Vabakutselise lepinguline töö
  • Osalise koormusega kaugtöö
  • Aktiivsete projektietappide ajal ligikaudu 10–20 tundi nädalas
  • Tasu kuni 25 dollarit tunnis ekvivalendina, sõltuvalt kogemustasemest ja töötempost
  • Võimalus toetada uuenduslikke tehnoloogia- ja tehisintellekti arendusprojekte

Seotud töökohad