Mindrift
Mindrift
Mindrift er en talentmarkedsplass for kunstig intelligens og en SaaS-plattform som kobler profesjonelle bidragsytere og fageksperter med prosjekter innen AI-trening og AI-evaluering fra teknologiselskaper. Som en del av Toloka samarbeider selskapet med skribenter, redaktører, kvalitetssikringsspesialister, forskere og andre fageksperter som bidrar til å generere treningsdata, vurdere modellsikkerhet og resonnering, evaluere mediekvalitet og skape virkelighetsnære scenarioer for å forbedre AI-systemers ytelse og pålitelighet. Mindrift rekrutterer og kvalitetssikrer bidragsytere gjennom vurderinger og identitetsverifisering, og tilbyr deretter fleksible, betalte prosjektmuligheter innen AI-trening og AI-evaluering.

Senior Python-ingeniør innen dataskraping – frilans og fjernarbeid

Bygg og drift skalerbare Python-baserte arbeidsflyter for dataskraping i Mindrifts AI-prosjekter. Hent ut, valider og bearbeid strukturerte data fra komplekse, dynamiske nettsteder.

Beskrivelse

  • Lede spesialiserte arbeidsflyter for dataskraping i Tendem-prosjektet og virkelige bruksområder
  • Håndtere ekstraksjon fra komplekse nettsteder fra start til slutt
  • Levere komplette, nøyaktige og pålitelige strukturerte datasett
  • Bruke tilgjengelige verktøy og tilpassede arbeidsflyter for å effektivisere innsamling, validering og oppgaveutførelse
  • Skrape dynamiske og interaktive kilder ved å tilpasse deg JavaScript-gjengitt innhold og endret nettstedsatferd
  • Opprettholde datakvaliteten gjennom validering, kontroll på tvers av kilder, formateringsstandarder og systematisk gjennomgang
  • Skalere dataskraping av store datamengder med effektiv satsvis eller parallell behandling
  • Overvåke feil og opprettholde stabiliteten ved mindre endringer i nettstedsstrukturen
  • Bruke Apify, OpenRouter og relaterte teknologier sammen med teknisk ekspertise og skreddersydde løsninger

Krav

  • Minst fem års relevant erfaring innen data engineering, web scraping, automatisering eller programvareutvikling er påkrevd
  • En bachelor- eller mastergrad i ingeniørfag, anvendt matematikk, informatikk eller et beslektet teknisk fagområde er en fordel
  • Sterkt praktisk grunnlag innen skripting, automatisering og arbeidsflyter for dataekstraksjon
  • Omfattende erfaring med Python-scraping ved bruk av BeautifulSoup, Selenium eller tilsvarende verktøy, JavaScript- og AJAX-innhold, uendelig rulling og proxierte API-er
  • Evne til å hente ut informasjon fra komplekse strukturer som hierarkier, arkiverte sider og inkonsekvent HTML
  • Erfaring med å rense, normalisere og validere data for levering i strukturerte CSV-, JSON- eller Google Sheets-formater
  • Dokumentert erfaring med å håndtere antibottiltak og skiftende nettstedsstrukturer i stor skala
  • Praktisk erfaring med AWS eller tilsvarende skyinfrastruktur samt Docker-basert containerisering
  • Erfaring med å bruke LangChain, OpenRouter eller lignende LLM-rammeverk i automatiseringsoppgaver
  • Svært god sans for detaljer og sterkt fokus på datanøyaktighet
  • Evne til å arbeide selvstendig og feilsøke effektivt
  • En GitHub-profil er en fordel
  • Engelsk på øvre mellomnivå, B2 eller høyere, er påkrevd

Fordeler

  • Frilansoppdrag
  • Deltidsarbeid på avstand
  • Omtrent 10–20 timer per uke i aktive prosjektperioder
  • Mulighet til å arbeide med innovative teknologiprosjekter gjennom Mindrift-plattformen

Relaterte jobber

Eventogy

Produktutvikler (frontend og fullstack)

Eventogy

Bygg Eventogys plattform for arrangementshåndtering med Next.js, React, TypeScript og Laravel, fra administrasjonsverktøy og deltakernettsteder til API-er. Utvikle AI-assisterte funksjoner for bedriftskunder i regulerte bransjer.

Åpne
Creative information Technology

Senior Java-utvikler, på arbeidsstedet i Virginia

Creative information Technology
11 – 50 Ansatte
B2BMaskinvareSikkerhet

Bygg skalerbare Java-mikrotjenester for CITI, en IT-tjenesteleverandør for offentlige og kommersielle kunder. Utvikle sikre applikasjoner for identitets-, legitimasjons- og tilgangsstyring.

Åpne