Mindrift on tekoälyalan osaajamarkkinapaikka ja SaaS-alusta, joka yhdistää ammattimaiset osallistujat ja alakohtaiset asiantuntijat teknologiayritysten tekoälyn koulutus- ja arviointiprojekteihin. Tolokan osana se työskentelee kirjoittajien, toimittajien, laadunvarmistuksen asiantuntijoiden, tutkijoiden ja muiden alansa asiantuntijoiden kanssa. He auttavat tuottamaan koulutusdataa, arvioimaan mallien turvallisuutta ja päättelykykyä, arvioimaan median laatua sekä luomaan tosielämän tilanteita tekoälyn suorituskyvyn ja luotettavuuden parantamiseksi. Mindrift rekrytoi ja arvioi osallistujat testien ja henkilöllisyyden todentamisen avulla ja tarjoaa sen jälkeen joustavia, palkallisia projektimahdollisuuksia tekoälyn koulutuksen ja arvioinnin parissa.
Kokenut Python-verkkokaavinnan insinööri – Serbia, etätyö, osa-aikainen
Kokenut Python-insinööri vastaa luotettavien verkkokaavinta- ja tietojenkäsittelyprosessien rakentamisesta Mindriftin Tendem AI -projektiin. Tehtävässä keskitytään jäsenneltyjen tietoaineistojen poimimiseen, validointiin ja skaalaamiseen monimutkaisilta ja dynaamisilta verkkosivustoilta.
Kuvaus
- Hallinnoi monimutkaisten verkkosivustojen tietojen poimintaprosesseja alusta loppuun ja toimita täydellisiä, täsmällisiä ja luotettavia jäsenneltyjä tietoaineistoja.
- Hyödynnä saatavilla olevia työkaluja ja tarkoitukseen mukautettuja työnkulkuja nopeuttaaksesi tiedonkeruuta, validointia ja tehtävien suorittamista määriteltyjen vaatimusten mukaisesti.
- Poimi tietoja luotettavasti dynaamisista ja interaktiivisista lähteistä ja mukauta toimintaa JavaScriptillä renderöityyn sisältöön sekä muuttuviin sivustojen toimintatapoihin.
- Ylläpidä tietojen laatua validointitarkistuksilla, lähteiden välisillä vertailuilla, muotoilun valvonnalla ja järjestelmällisellä toimitusta edeltävällä varmennuksella.
- Skaalaa suurten tietomäärien kaavintaa tehokkaalla eräajolla tai rinnakkaisella käsittelyllä, seuraa virheitä ja säilytä vakaus vähäisistä sivustomuutoksista huolimatta.
- Hyödynnä verkkokaavinnan, tiedonpoiminnan ja tietojenkäsittelyn asiantuntemusta Tendem-projektissa.
- Työskentele Apifyn, OpenRouterin ja muiden asiaankuuluvien teknologioiden parissa.
Vaatimukset
- Vähintään viiden vuoden relevantti kokemus data-analytiikasta, verkkokaavinnasta, automaatiosta tai ohjelmistokehityksestä.
- Insinööritieteiden, sovelletun matematiikan, tietojenkäsittelytieteen tai muun vastaavan teknisen alan kandidaatin tai maisterin tutkinto katsotaan eduksi.
- Vankka kokemus Python-pohjaisesta verkkokaavinnasta BeautifulSoupilla, Seleniumilla tai vastaavilla työkaluilla, mukaan lukien JavaScript, AJAX, infinite scroll ja välityspalvelinpohjainen API-käyttö.
- Kyky poimia tietoa monimutkaisista rakenteista, kuten hierarkioista, arkistoiduista sivuista ja epäyhtenäisestä HTML:stä.
- Vankka kokemus tietojen puhdistamisesta, normalisoinnista ja validoinnista toimitusta varten jäsennellyissä muodoissa, kuten CSV-, JSON- ja Google Sheets -muodoissa.
- Käytännön kokemus bottien vastaisten suojausten ja muuttuvien verkkosivustorakenteiden hallinnasta suuressa mittakaavassa.
- Kokemus AWS:n tai vastaavan pilvi-infrastruktuurin ja Dockerin käytöstä tuotanto- tai projektityönkuluissa.
- Käytännön kokemus LLM-kehysten, kuten LangChainin, OpenRouterin tai vastaavien työkalujen, soveltamisesta automaatiotehtäviin.
- Tarkkuus ja vahva sitoutuminen tietojen oikeellisuuteen.
- Itsenäinen työskentelyote ja kyky ratkaista ongelmia oma-aloitteisesti.
- Tehtävässä edellytetään englannin kielen ylempää keskitasoa eli vähintään B2-tasoa.
- GitHub-profiili katsotaan eduksi.
Edut
- Freelance-toimeksianto.
- Osa-aikainen etätyö.
- Aktiivisten projektivaiheiden aikana arviolta 10–20 tuntia viikossa.