Mindrift
Mindrift
Mindrift er en talentmarkedsplass for kunstig intelligens og en SaaS-plattform som kobler profesjonelle bidragsytere og fageksperter med prosjekter innen AI-trening og AI-evaluering fra teknologiselskaper. Som en del av Toloka samarbeider selskapet med skribenter, redaktører, kvalitetssikringsspesialister, forskere og andre fageksperter som bidrar til å generere treningsdata, vurdere modellsikkerhet og resonnering, evaluere mediekvalitet og skape virkelighetsnære scenarioer for å forbedre AI-systemers ytelse og pålitelighet. Mindrift rekrutterer og kvalitetssikrer bidragsytere gjennom vurderinger og identitetsverifisering, og tilbyr deretter fleksible, betalte prosjektmuligheter innen AI-trening og AI-evaluering.

Senior Python-ingeniør innen datascraping – deltid på avstand

Led pålitelig web scraping og levering av strukturerte data for Mindrifts AI-teknologiprosjekter. Automatiser uthenting, validering og skalerbar behandling på komplekse, dynamiske nettsteder.

Beskrivelse

  • Lede datauthenting fra start til slutt på komplekse nettsteder
  • Levere komplette, nøyaktige og pålitelige strukturerte datasett
  • Bruke verktøy og tilpassede arbeidsflyter for å effektivisere innsamling, validering og oppgaveutførelse
  • Hente ut data fra dynamiske nettkilder ved å tilpasse seg JavaScript-innhold og endret nettstedsatferd
  • Opprettholde datakvaliteten gjennom validering, konsistenskontroller, formateringskontroller og systematisk verifisering
  • Skalere scraping av store datamengder med effektiv satsvis og parallell behandling
  • Overvåke feil og opprettholde stabiliteten ved mindre endringer i nettstedets struktur
  • Bruke Apify, OpenRouter og relaterte teknologier til webuthenting og databehandling

Krav

  • Minst 5 års relevant erfaring med data engineering, web scraping, automatisering eller programvareutvikling
  • Bachelor- eller mastergrad i ingeniørfag, anvendt matematikk, informatikk eller et beslektet teknisk fagområde er en fordel
  • Sterke tekniske ferdigheter med praktisk erfaring innen skripting, automatisering og arbeidsflyter for datauthenting
  • Avansert erfaring med Python-scraping ved hjelp av BeautifulSoup, Selenium eller lignende verktøy, dynamisk JavaScript-/AJAX-innhold, uendelig scrolling og proxybaserte API-er
  • Evne til å hente ut informasjon fra komplekse hierarkier, arkiverte sider og inkonsekvent HTML
  • Erfaring med å rense, normalisere og validere data for levering i CSV, JSON eller Google Sheets
  • Erfaring med å håndtere antibotmekanismer og skiftende nettstedsstrukturer i stor skala
  • Erfaring med AWS eller tilsvarende skyinfrastruktur samt Docker-containerisering
  • Praktisk erfaring med å bruke LangChain, OpenRouter eller lignende LLM-rammeverk til automatisering
  • Nøyaktig og grundig tilnærming til datanøyaktighet og kvalitet
  • Evne til å arbeide selvstendig og feilsøke effektivt
  • Engelsk på øvre mellomnivå (B2) eller høyere
  • Lenke til en GitHub-profil er en fordel

Fordeler

  • Frilansoppdrag
  • Deltidsarbeid på avstand
  • Omtrent 10–20 timer per uke i aktive perioder
  • Opptil tilsvarende 25 USD per time, avhengig av erfaringsnivå og arbeidstempo
  • Mulighet til å arbeide med innovative teknologiprosjekter gjennom Mindrift-plattformen

Relaterte jobber

Eventogy

Produktutvikler (frontend og fullstack)

Eventogy

Bygg Eventogys plattform for arrangementshåndtering med Next.js, React, TypeScript og Laravel, fra administrasjonsverktøy og deltakernettsteder til API-er. Utvikle AI-assisterte funksjoner for bedriftskunder i regulerte bransjer.

Åpne
Creative information Technology

Senior Java-utvikler, på arbeidsstedet i Virginia

Creative information Technology
11 – 50 Ansatte
B2BMaskinvareSikkerhet

Bygg skalerbare Java-mikrotjenester for CITI, en IT-tjenesteleverandør for offentlige og kommersielle kunder. Utvikle sikre applikasjoner for identitets-, legitimasjons- og tilgangsstyring.

Åpne
CrowdStrike

Ingeniør III, skyautentisering og autorisasjon

CrowdStrike

Bygg tjenester for autentisering og autorisasjon til CrowdStrikes globale cybersikkerhetsplattform. Led utviklingen av distribuerte backend-systemer med Go, AWS, Kafka og tilhørende teknologi.

Åpne