Mindrift
Mindrift
Mindrift er en talentmarkedsplass for kunstig intelligens og en SaaS-plattform som kobler profesjonelle bidragsytere og fageksperter med prosjekter innen AI-trening og AI-evaluering fra teknologiselskaper. Som en del av Toloka samarbeider selskapet med skribenter, redaktører, kvalitetssikringsspesialister, forskere og andre fageksperter som bidrar til å generere treningsdata, vurdere modellsikkerhet og resonnering, evaluere mediekvalitet og skape virkelighetsnære scenarioer for å forbedre AI-systemers ytelse og pålitelighet. Mindrift rekrutterer og kvalitetssikrer bidragsytere gjennom vurderinger og identitetsverifisering, og tilbyr deretter fleksible, betalte prosjektmuligheter innen AI-trening og AI-evaluering.

Senior Python-ingeniør innen datascraping – frilans på distans

Mindrift søker en senior Python-ingeniør som skal bygge pålitelige arbeidsflyter for web scraping og databehandling i AI-prosjekter. Rollen fokuserer på å hente ut, validere og skalere strukturerte datasett fra komplekse nettsteder.

Beskrivelse

  • Lede arbeidsflyter for datauthenting fra start til slutt på komplekse nettsteder
  • Levere komplette, nøyaktige og pålitelige strukturerte datasett
  • Bruke tilgjengelige verktøy og tilpassede arbeidsflyter for å effektivisere datainnsamling, validering og oppgaveutførelse
  • Samle inn data fra dynamiske og interaktive kilder ved å tilpasse seg JavaScript-gjengitt innhold og endret atferd på nettsteder
  • Opprettholde datakvaliteten gjennom valideringskontroller, gjennomgang av samsvar på tvers av kilder, formateringskrav og systematisk verifisering
  • Skalere scraping av store datasett gjennom effektiv batchbehandling eller parallell behandling
  • Overvåke feil og opprettholde scraperens stabilitet ved mindre endringer i nettsteders struktur
  • Arbeide med Apify, OpenRouter og andre relevante teknologier

Krav

  • Minst 5 års relevant erfaring med data engineering, web scraping, automatisering eller programvareutvikling
  • Engelsk på øvre mellomnivå, tilsvarende B2 eller høyere
  • Solid erfaring med Python-scraping ved hjelp av BeautifulSoup, Selenium eller tilsvarende verktøy, dynamisk innhold som JavaScript, AJAX og uendelig scrolling samt proxybaserte API-er
  • Evne til å hente ut informasjon fra komplekse strukturer, inkludert hierarkier, arkiverte sider og inkonsekvent HTML
  • Erfaring med å rense, normalisere og validere data for levering i CSV, JSON eller Google Sheets
  • Erfaring med å håndtere antibot-mekanismer og skiftende nettstedsstrukturer i stor skala
  • Praktisk erfaring med AWS eller tilsvarende skyinfrastruktur samt Docker-containerisering
  • Praktisk erfaring med LangChain, OpenRouter eller lignende LLM-rammeverk for automatisering
  • Stor sans for detaljer og sterkt fokus på datanøyaktighet
  • Evne til å arbeide selvstendig og feilsøke effektivt
  • En bachelor- eller mastergrad i ingeniørfag, anvendt matematikk, informatikk eller en beslektet teknisk disiplin er en fordel
  • En lenke til en GitHub-profil er en fordel

Fordeler

  • Frilansoppdrag
  • Deltidsarbeid på distans
  • Omtrent 10–20 timer per uke i aktive prosjektfaser
  • Opptil tilsvarende 40 USD per time, avhengig av erfaringsnivå og arbeidstempo

Relaterte jobber

Genesis Tech

Senior fullstack-produktutvikler (Node.js, AI-native)

Genesis Tech
1 001 – 5 000 Ansatte
LogistikkMarkedsføringRådgivning

Bygg backend-systemer, infrastruktur og AI-native-funksjoner for Boosters produkt for personlig digital sikkerhet. Driv produktutviklingen fra arkitektur og design til lansering og resultatanalyse.

Åpne
URBN (Urban Outfitters, Anthropologie Group, Free People & Nuuly)

Programvareingeniør II, Kafka og Python — URBN, Philadelphia

URBN (Urban Outfitters, Anthropologie Group, Free People & Nuuly)

Bygg tjenester for Kafka-hendelsesstrømmer og integrasjoner hos URBN, og bidra til overgangen fra eldre plattformer til skybaserte systemer. Rollen omfatter Python, automatiserte tester og CI/CD-praksis.

Åpne
Mirantis

Senior Rust-programvareingeniør hos Mirantis (fjernarbeid, Europa)

Mirantis

Bygg Kubernetes-kontrollplan for Mirantis’ skybaserte AI-infrastruktur. Utvikle nettverk, DPU og orkestreringssystemer for bare metal til krevende arbeidsbelastninger.

Åpne