Mindrift
Mindrift
501 – 1000 Töötajad
SaaSTehisintellektTuruplats
Mindrift on tehisintellekti valdkonna talenditurg ja SaaS-platvorm, mis ühendab professionaalsed panustajad ja valdkonnaeksperdid tehnoloogiaettevõtete tehisintellekti treenimise ja hindamise projektidega. Toloka osana teeb see koostööd kirjutajate, toimetajate, kvaliteedikontrolli spetsialistide, teadlaste ja teiste ainevaldkonnaekspertidega, kes aitavad luua treeningandmeid, hinnata mudelite ohutust ja arutlusvõimet, hinnata meedia kvaliteeti ning luua tegeliku elu olukordi tehisintellekti jõudluse ja töökindluse parandamiseks. Mindrift värbab ja kontrollib panustajaid hindamiste ning isikusamasuse tuvastamise kaudu, seejärel pakub paindlikke tasustatud projektivõimalusi tehisintellekti treenimise ja hindamise valdkonnas.

Senior Pythoni andmekraapimise insener (vabakutseline, kaugtöö Kreekas)

Loo ja skaleeri usaldusväärseid Pythonil põhinevaid andmekraapimise töövooge Mindrifti tehisintellekti tehnoloogia projektidele. Eri, valideeri ja edasta keerukatelt ning dünaamilistelt veebisaitidelt struktureeritud andmekogumeid.

Kirjeldus

  • Halda keerukate veebisaitide täielikke andmeekstraheerimise töövooge
  • Edasta täielikke, täpseid ja usaldusväärseid struktureeritud andmekogumeid
  • Kasuta tööriistu ja kohandatud töövooge andmete kogumise, valideerimise ja ülesannete täitmise kiirendamiseks
  • Kogu andmeid dünaamilistest ja interaktiivsetest allikatest, sealhulgas JavaScriptiga renderdatud lehtedelt
  • Kohanda kraapimismeetodeid vastavalt veebisaitide käitumise muutumisele
  • Hoia andmekvaliteeti valideerimise, allikatevaheliste kontrollide, vormindusstandardite ja süsteemse kontrollimise abil
  • Skaleeri suurte andmekogumite kraapimist tõhusa pakk- või paralleeltöötluse abil
  • Jälgi ekstraheerimise ebaõnnestumisi ja säilita stabiilsus veebisaidi struktuuri väikeste muudatuste korral

Nõuded

  • Vähemalt 5 aastat asjakohast kogemust andmeinseneeria, veebikraapimise, automatiseerimise või tarkvaraarenduse alal
  • Põhjalik Pythoni veebikraapimise kogemus BeautifulSoupi, Seleniumi või võrreldavate tööriistadega, dünaamilise sisu ja puhverserveripõhiste API-dega
  • Oskus ekstraheerida teavet keerukatest struktuuridest, sealhulgas hierarhiatest, arhiivitud lehtedelt ja ebaühtlasest HTML-ist
  • Kogemus andmete puhastamise, normaliseerimise ja valideerimisega struktureeritud edastamiseks CSV-, JSON- ja Google Sheetsi vormingus
  • Kogemus robotivastaste süsteemide ja muutuvate veebisaidi struktuuride käsitlemisega suurel skaalal
  • Kogemus AWS-i või samaväärse pilveinfrastruktuuri ja Dockeri konteineriseerimisega
  • Praktiline kogemus LLM-i raamistike, näiteks LangChaini või OpenRouteri, rakendamisel automatiseerimisülesannetes
  • Väga täpne lähenemine andmete õigsusele
  • Iseseisvad ja algatuslikud tõrkeotsinguoskused
  • Inglise keele keskmisest kõrgem oskus (B2) või parem
  • Inseneriteaduse, rakendusmatemaatika, arvutiteaduse või seotud tehnilise valdkonna bakalaureuse- või magistrikraad tuleb kasuks
  • GitHubi profiil tuleb kasuks

Hüved

  • Tööta kaugtööna
  • Osaline tööaeg, aktiivsete projektifaaside ajal ligikaudu 10–20 tundi nädalas
  • Vabakutseline koostöö
  • Töötamine uuenduslike tehnoloogiaprojektidega Mindrifti platvormi kaudu

Seotud töökohad

Air Liquide

Finantstrainee – prantsuse, saksa või hollandi keele oskaja

Air Liquide

Liitu Air Liquide’i finantsvaldkonna praktikaprogrammiga, et toetada raamatupidamist, rahavoogude juhtimist ja kooskõlastusi globaalses äriteenuste keskuses. Aita täiustada finantskuu sulgemise ja ERP-protsesse, töötades inglise ning prantsuse, saksa või hollandi keeles.

Ava