Mindrift on tekoälyalan osaajamarkkinapaikka ja SaaS-alusta, joka yhdistää ammattimaiset osallistujat ja alakohtaiset asiantuntijat teknologiayritysten tekoälyn koulutus- ja arviointiprojekteihin. Tolokan osana se työskentelee kirjoittajien, toimittajien, laadunvarmistuksen asiantuntijoiden, tutkijoiden ja muiden alansa asiantuntijoiden kanssa. He auttavat tuottamaan koulutusdataa, arvioimaan mallien turvallisuutta ja päättelykykyä, arvioimaan median laatua sekä luomaan tosielämän tilanteita tekoälyn suorituskyvyn ja luotettavuuden parantamiseksi. Mindrift rekrytoi ja arvioi osallistujat testien ja henkilöllisyyden todentamisen avulla ja tarjoaa sen jälkeen joustavia, palkallisia projektimahdollisuuksia tekoälyn koulutuksen ja arvioinnin parissa.
Senior Python -insinööri datan verkkokaavintaan — etätyö Filippiineiltä
Mindrift etsii kokenutta Python-insinööriä rakentamaan luotettavia verkkokaavinnan työnkulkuja tekoälyprojekteihin. Tehtävässä keskitytään jäsennellyn datan poimintaan, validointiin ja skaalaamiseen monimutkaisilta ja dynaamisilta verkkosivustoilta.
Kuvaus
- Hallinnoi kokonaisia datan poimintaprosesseja monimutkaisilla verkkosivustoilla
- Tuota kattavia, tarkkoja ja luotettavia jäsenneltyjä aineistoja
- Hyödynnä työkaluja ja räätälöityjä työnkulkuja tiedonkeruun, validoinnin ja tehtävien toimittamisen nopeuttamiseen
- Kerää tietoa dynaamisista ja vuorovaikutteisista lähteistä, mukaan lukien JavaScriptillä renderöidyt sivut
- Mukauta verkkokaavintamenetelmiä verkkosivustojen toiminnan ja rakenteiden muuttuessa
- Suojaa datan laatu validoinnin, eri lähteiden välisten tarkistusten, muotoilusääntöjen ja järjestelmällisen tarkastelun avulla
- Skaalaa suurten datamäärien verkkokaavintaa tehokkaalla eräkäsittelyllä ja rinnakkaisella prosessoinnilla
- Seuraa poimintavirheitä ja ylläpidä työnkulkujen vakautta verkkosivustojen pienten muutosten aikana
Vaatimukset
- Vähintään viiden vuoden relevantti kokemus data-analytiikasta, verkkokaavinnasta, automaatiosta tai ohjelmistokehityksestä
- Insinööritieteiden, sovelletun matematiikan, tietojenkäsittelytieteen tai muun vastaavan teknisen alan kandidaatin- tai maisterintutkinto katsotaan eduksi
- Vahva Python-pohjainen verkkokaavintakokemus BeautifulSoupista, Seleniumista tai vastaavista työkaluista, dynaamisesta sisällöstä ja välityspalvelimilla käytettävistä rajapinnoista
- Osaa poimia tietoa monimutkaisista lähteistä, kuten hierarkioista, arkistoiduista sivuista ja epäyhtenäisestä HTML:stä
- Osaa puhdistaa, normalisoida ja validoida dataa CSV-, JSON- tai Google Sheets -muotoista toimittamista varten
- Osaa käsitellä bottien torjuntamekanismeja ja muuttuvia verkkosivustorakenteita laajamittaisissa verkkokaavintaprojekteissa
- AWS:n tai vastaavan pilvi-infrastruktuurin ja Docker-pohjaisen konttiteknologian käyttökokemus
- Osaa soveltaa LLM-kehyksiä, kuten LangChainia, OpenRouteria tai vastaavia työkaluja automaation työnkulkuihin
- Työskentelee poikkeuksellisen huolellisesti ja keskittyy johdonmukaisesti datan tarkkuuteen
- Pystyy työskentelemään itsenäisesti sekä diagnosoimaan ja ratkaisemaan teknisiä ongelmia
- Englannin kielen taito vähintään ylemmällä keskitasolla (B2)
Edut
- Freelance-projektityö
- Osa-aikainen etätyöjärjestely
- Aktiivisten projektijaksojen aikana noin 10–20 tuntia viikossa
- Korvaus enintään 30 dollaria tunnilta vastaavana määränä kokemustason ja työskentelytahdin perusteella