Mindrift on tekoälyalan osaajamarkkinapaikka ja SaaS-alusta, joka yhdistää ammattimaiset osallistujat ja alakohtaiset asiantuntijat teknologiayritysten tekoälyn koulutus- ja arviointiprojekteihin. Tolokan osana se työskentelee kirjoittajien, toimittajien, laadunvarmistuksen asiantuntijoiden, tutkijoiden ja muiden alansa asiantuntijoiden kanssa. He auttavat tuottamaan koulutusdataa, arvioimaan mallien turvallisuutta ja päättelykykyä, arvioimaan median laatua sekä luomaan tosielämän tilanteita tekoälyn suorituskyvyn ja luotettavuuden parantamiseksi. Mindrift rekrytoi ja arvioi osallistujat testien ja henkilöllisyyden todentamisen avulla ja tarjoaa sen jälkeen joustavia, palkallisia projektimahdollisuuksia tekoälyn koulutuksen ja arvioinnin parissa.
Senior Python -verkkokaavinta-asiantuntija (freelance, etätyö Portugalista)
Rakenna luotettavia verkkokaavinta- ja tietojenkäsittelyputkia Mindriftin Tendem AI -projektiin. Poimi, validoi ja skaalaa jäsenneltyjä tietoaineistoja monimutkaisilta ja dynaamisilta verkkosivustoilta.
Kuvaus
- Hallinnoi monimutkaisten verkkosivustojen tietojen poimintaa alusta loppuun ja toimita täydellisiä, täsmällisiä ja luotettavia jäsenneltyjä tietoaineistoja
- Hyödynnä työkaluja ja räätälöityjä työnkulkuja nopeuttaaksesi tiedonkeruuta, validointia ja tehtävien suorittamista
- Kerää tietoa dynaamisista ja vuorovaikutteisista lähteistä mukautuen JavaScriptillä renderöityyn sisältöön ja verkkosivustojen muuttuvaan toimintaan
- Ylläpidä tietojen laatua validointitarkistuksilla, lähteiden välisillä vertailuilla, muotoiluvaatimuksilla ja järjestelmällisellä tarkistuksella
- Laajenna kaavintatoimintoja suurille tietoaineistoille tehokkaan eräajon tai rinnakkaiskäsittelyn avulla
- Seuraa poiminnan epäonnistumisia ja säilytä vakaus, kun sivustoissa tapahtuu pieniä rakenteellisia muutoksia
- Hyödynnä verkkokaavinnan, tiedon poiminnan ja tietojenkäsittelyn asiantuntemusta Tendem-projektin erikoistuneissa työnkuluissa
Vaatimukset
- Sinulla on vähintään viiden vuoden relevantti kokemus data- ja tietotekniikasta, verkkokaavinnasta, automaatiosta tai ohjelmistokehityksestä
- Hallitset Python-pohjaisen verkkokaavinnan sekä BeautifulSoupin, Selenen tai vastaavien työkalujen, JavaScript- ja AJAX-sisällön, loputtoman vierityksen, rajapintojen ja välityspalvelinten käytön
- Osaat poimia tietoa monimutkaisista hierarkioista, arkistoiduilta sivuilta ja epäyhtenäisestä HTML:stä
- Sinulla on vankka perusta tietojen puhdistamisesta, normalisoinnista ja validoinnista sekä kokemusta jäsenneltyjen CSV-, JSON- ja Google Sheets -aineistojen tuottamisesta
- Sinulla on kokemusta bottien vastaisten suojausten ja muuttuvien sivurakenteiden hallinnasta suuressa mittakaavassa
- Sinulla on kokemusta AWS:stä tai vastaavasta pilvi-infrastruktuurista sekä Docker-pohjaisesta kontituksesta
- Sinulla on käytännön kokemusta LLM-kehysten, kuten LangChainin, OpenRouterin tai vastaavien työkalujen, soveltamisesta automaatiotehtäviin
- Työskentelet huolellisesti ja keskityt johdonmukaisesti tietojen täsmällisyyteen
- Työskentelet itsenäisesti, otat vastuun ongelmien selvittämisestä ja toimit oma-aloitteisesti
- Englannin kielen taitosi on vähintään ylemmän keskitason (B2) tasolla
- Insinööritieteiden, soveltavan matematiikan, tietojenkäsittelytieteen tai muun vastaavan teknisen alan kandidaatin tai maisterin tutkinto katsotaan eduksi
- GitHub-profiilin linkki katsotaan eduksi
Edut
- Freelance-toimeksianto
- Osa-aikainen työmäärä arviolta 10–20 tuntia viikossa aktiivisten projektivaiheiden aikana
- Etätyö
- Mahdollisuus työskennellä innovatiivisten teknologiahankkeiden parissa Mindrift-alustan kautta