Mindrift
Mindrift
Mindrift er en talentmarkedsplass for kunstig intelligens og en SaaS-plattform som kobler profesjonelle bidragsytere og fageksperter med prosjekter innen AI-trening og AI-evaluering fra teknologiselskaper. Som en del av Toloka samarbeider selskapet med skribenter, redaktører, kvalitetssikringsspesialister, forskere og andre fageksperter som bidrar til å generere treningsdata, vurdere modellsikkerhet og resonnering, evaluere mediekvalitet og skape virkelighetsnære scenarioer for å forbedre AI-systemers ytelse og pålitelighet. Mindrift rekrutterer og kvalitetssikrer bidragsytere gjennom vurderinger og identitetsverifisering, og tilbyr deretter fleksible, betalte prosjektmuligheter innen AI-trening og AI-evaluering.

Senior Python-ingeniør innen webskraping – frilans på avstand

Bygg og vedlikehold nøyaktige, skalerbare arbeidsflyter for webskraping i Mindrifts Tendem AI-prosjekt. Bruk Python og automatiseringsverktøy til å hente ut, validere og behandle komplekse webdata.

Beskrivelse

  • Ha ansvar for datauttrekk fra start til slutt på komplekse nettsteder
  • Levere strukturerte datasett med bred dekning, høy nøyaktighet og pålitelig levering
  • Kombinere tilgjengelige verktøy med tilpassede arbeidsflyter for å effektivisere innsamling, validering og oppgaveløsning
  • Samle inn data fra dynamiske, interaktive nettsteder og tilpasse deg JavaScript-rendret innhold og endret nettstedsatferd
  • Sikre datakvaliteten med valideringsrutiner, sammenligninger på tvers av kilder, formateringsstandarder og systematisk gjennomgang
  • Utvide skrapingskapasiteten for store datasett gjennom effektiv satsvis behandling eller parallell kjøring
  • Følge opp uttrekksfeil og opprettholde stabiliteten når nettstedsstrukturer gjennomgår mindre endringer
  • Bruke verktøy som Apify og OpenRouter sammen med godt teknisk skjønn

Krav

  • Minst fem års relevant erfaring innen data engineering, webskraping, automatisering eller programvareutvikling
  • Svært gode ferdigheter i Python-basert skraping med BeautifulSoup, Selenium eller tilsvarende verktøy, JavaScript- og AJAX-innhold, uendelig rulling og proxybaserte API-er
  • Evne til å hente data fra komplekse kilder som hierarkier, arkiverte sider og inkonsekvent HTML
  • Kunnskap om å rense, normalisere og validere data for strukturert levering i CSV, JSON og Google Sheets
  • Praktisk erfaring med å håndtere antibot-beskyttelse og nettsteder i endring i stor skala
  • Har brukt AWS eller tilsvarende skyinfrastruktur og Docker-containerisering i reelle prosjekter
  • Har brukt LLM-rammeverk som LangChain eller OpenRouter i automatiseringsarbeid
  • Arbeider nøyaktig og har et sterkt fokus på datakvalitet
  • Kan arbeide selvstendig, ta initiativ og feilsøke problemer uten tett oppfølging
  • Engelsk på øvre mellomnivå (B2) eller høyere
  • Bachelor- eller mastergrad i ingeniørfag, anvendt matematikk, informatikk eller et beslektet teknisk fagområde er en fordel
  • En lenke til en GitHub-profil er en fordel

Fordeler

  • Deltids frilansoppdrag som utføres på avstand
  • Omtrent 10–20 timer per uke i aktive prosjektfaser
  • Kompensasjon på opptil tilsvarende 25 USD per time, basert på erfaringsnivå og arbeidstempo

Relaterte jobber

Eventogy

Produktutvikler (frontend og fullstack)

Eventogy

Bygg Eventogys plattform for arrangementshåndtering med Next.js, React, TypeScript og Laravel, fra administrasjonsverktøy og deltakernettsteder til API-er. Utvikle AI-assisterte funksjoner for bedriftskunder i regulerte bransjer.

Åpne
Creative information Technology

Senior Java-utvikler, på arbeidsstedet i Virginia

Creative information Technology
11 – 50 Ansatte
B2BMaskinvareSikkerhet

Bygg skalerbare Java-mikrotjenester for CITI, en IT-tjenesteleverandør for offentlige og kommersielle kunder. Utvikle sikre applikasjoner for identitets-, legitimasjons- og tilgangsstyring.

Åpne