Mindrift
Mindrift
Mindrift er en talentmarkedsplass for kunstig intelligens og en SaaS-plattform som kobler profesjonelle bidragsytere og fageksperter med prosjekter innen AI-trening og AI-evaluering fra teknologiselskaper. Som en del av Toloka samarbeider selskapet med skribenter, redaktører, kvalitetssikringsspesialister, forskere og andre fageksperter som bidrar til å generere treningsdata, vurdere modellsikkerhet og resonnering, evaluere mediekvalitet og skape virkelighetsnære scenarioer for å forbedre AI-systemers ytelse og pålitelighet. Mindrift rekrutterer og kvalitetssikrer bidragsytere gjennom vurderinger og identitetsverifisering, og tilbyr deretter fleksible, betalte prosjektmuligheter innen AI-trening og AI-evaluering.

Senioringeniør innen Python og dataskraping (frilans, fjernarbeid i Argentina)

Bygg pålitelige Python-baserte skrapesystemer for Mindrifts AI-prosjekter. Ekstraher, valider og skaler strukturerte data fra komplekse, dynamiske nettsteder.

Beskrivelse

  • Lede komplette arbeidsflyter for dataekstraksjon på komplekse nettsteder
  • Levere omfattende, nøyaktige og pålitelige strukturerte datasett
  • Kombinere tilgjengelige verktøy med tilpassede arbeidsflyter for å forbedre innsamling, validering og oppgaveutførelse
  • Samle inn data fra dynamiske og interaktive kilder ved å tilpasse seg JavaScript-rendert innhold og endret atferd på nettsteder
  • Opprettholde datakvalitet gjennom validering, kontroller på tvers av kilder, formateringsstandarder og systematisk gjennomgang
  • Skalere skraping av store datamengder gjennom effektiv satsvis behandling og parallell prosessering
  • Spore ekstraksjonsfeil og opprettholde påliteligheten i arbeidsflyten når nettstedsstrukturer endres
  • Bruke Apify, OpenRouter og relaterte teknologier sammen med godt teknisk skjønn

Krav

  • Minst 5 års relevant erfaring innen data engineering, webskraping, automatisering eller programvareutvikling
  • Avansert erfaring med Python-skraping ved hjelp av BeautifulSoup, Selenium eller tilsvarende verktøy, JavaScript- og AJAX-innhold, uendelig rulling og proxybaserte API-er
  • Evne til å ekstrahere informasjon fra hierarkiske data, arkiverte sider og uregelmessige HTML-strukturer
  • Erfaring med å rense, normalisere og validere data for levering i CSV, JSON eller Google Sheets
  • Praktisk erfaring med å håndtere antibot-beskyttelse og skiftende nettstedsstrukturer i stor skala
  • Erfaring med AWS eller tilsvarende skyinfrastruktur og Docker-basert containerisering
  • Praktisk kjennskap til LangChain, OpenRouter eller lignende LLM-rammeverk for automatisering
  • Svært god sans for detaljer og sterkt fokus på datanøyaktighet
  • Evne til å arbeide selvstendig, undersøke problemer og løse dem uten tett oppfølging
  • Engelsk på øvre mellomnivå (B2) eller høyere
  • Bachelor- eller mastergrad innen ingeniørfag, anvendt matematikk, informatikk eller en relatert teknisk disiplin er en fordel
  • En GitHub-profil eller lenke er en fordel

Fordeler

  • Frilansoppdrag
  • Deltidsarbeid på omtrent 10–20 timer per uke i aktive prosjektfaser
  • Fjernarbeid fra Argentina
  • Mulighet til å bidra til innovative teknologiprosjekter gjennom Mindrift-plattformen

Relaterte jobber

Fetch 📦

Direktør for strategiske kunder, Florida (fjernarbeid)

Fetch 📦

Led relasjonene med Fetchs nasjonale kunder og storkunder for PropTech-plattformen, utvikle strategiske kundekontoer og inngå komplekse avtaler. Øk utbredelsen og inntektene i regionen gjennom samarbeid på tvers av funksjoner og videreutvikling av kunderelasjoner.

Åpne