Mindrift
Mindrift
Mindrift är en marknadsplats för talanger inom artificiell intelligens och en SaaS-plattform som kopplar samman professionella medverkande och ämnesexperter med projekt inom AI-träning och AI-utvärdering från teknikföretag. Som en del av Toloka samarbetar företaget med skribenter, redaktörer, kvalitetssäkringsspecialister, forskare och andra ämnesexperter som hjälper till att skapa träningsdata, bedöma modellsäkerhet och resonemang, utvärdera mediekvalitet samt skapa verklighetsbaserade scenarier för att förbättra AI-systemens prestanda och tillförlitlighet. Mindrift rekryterar och granskar medverkande genom bedömningar och identitetsverifiering och erbjuder därefter flexibla, betalda projekt inom AI-träning och AI-utvärdering.

Senior Python Web Scraping Engineer – Frilans på distans

Bygg tillförlitliga Python-baserade arbetsflöden för web scraping och databehandling i Mindrifts AI-projekt. Extrahera, validera och skala strukturerade dataset från komplexa, dynamiska webbplatser.

Beskrivning

  • Hantera extraktionsarbetsflöden från början till slut på komplexa webbplatser och leverera fullständiga, korrekta och strukturerade dataset
  • Använd tillgängliga verktyg och anpassade arbetsflöden för att effektivisera datainsamling, validering och utförande av uppgifter enligt definierade krav
  • Anpassa extraktionsmetoder för JavaScript-renderat innehåll, interaktiva källor och förändrat webbplatsbeteende
  • Tillämpa validering, kontroller mot flera källor, formateringskontroller och systematisk verifiering för att upprätthålla datakvaliteten
  • Skala scraping av stora dataset genom effektiv batchbearbetning eller parallell bearbetning
  • Övervaka extraktionsfel och upprätthåll stabiliteten vid mindre förändringar i webbplatsens struktur
  • Använd expertis inom web scraping, dataextraktion och databehandling med verktyg som Apify, OpenRouter och relaterad teknik

Krav

  • Minst 5 års relevant erfarenhet av data engineering, web scraping, automatisering eller mjukvaruutveckling
  • En kandidat- eller masterexamen inom ingenjörsvetenskap, tillämpad matematik, datavetenskap eller ett närliggande tekniskt område är meriterande
  • Stark teknisk grund med praktisk erfarenhet av skriptning, automatisering och arbetsflöden för dataextraktion
  • Omfattande erfarenhet av scraping i Python med BeautifulSoup, Selenium eller liknande verktyg, inklusive JavaScript, AJAX, oändlig scrollning och proxybaserade API:er
  • Förmåga att extrahera data från komplexa hierarkier, arkiverade sidor och inkonsekventa HTML-strukturer
  • Erfarenhet av att rensa, normalisera och validera strukturerade dataset i CSV, JSON eller Google Sheets
  • Erfarenhet av att hantera antibot-mekanismer och föränderliga webbplatsstrukturer i stor skala
  • Praktisk erfarenhet av AWS eller motsvarande molninfrastruktur samt Docker-containerisering
  • Praktisk erfarenhet av att tillämpa LangChain, OpenRouter eller liknande LLM-ramverk på automatiseringsuppgifter
  • Mycket god känsla för detaljer och ett starkt engagemang för datanoggrannhet
  • Självständigt arbetssätt med förmåga att felsöka på egen hand
  • Engelska på övre mellannivå (B2) eller högre
  • En GitHub-länk är meriterande

Förmåner

  • Frilansuppdrag
  • Deltidsarbete på distans
  • Cirka 10–20 timmar per vecka under aktiva projektfaser

Relaterade jobb

Winning Assistants LLC

Tvåspråkig patientkoordinator inom sjukvården

Winning Assistants LLC

Stöd en amerikansk ultraljuds- och diagnostikmottagning genom att samordna patientsamtal, försäkringskontroller, kostnadsuppskattningar, besök och distansbaserad incheckning. Kommunicera med patienter på engelska och spanska.

Öppna
Eventogy

Produktutvecklare (frontend och fullstack)

Eventogy

Bygg Eventogys plattform för evenemangshantering med Next.js, React, TypeScript och Laravel, från administrationsverktyg och deltagarwebbplatser till API:er. Utveckla AI-assisterade funktioner för företagskunder i reglerade branscher.

Öppna
Creative information Technology

Senior Javautvecklare, på plats i Virginia

Creative information Technology
11 – 50 Anställda
B2BHårdvaraSäkerhet

Bygg skalbara Java-mikrotjänster för CITI, en IT-tjänsteleverantör för offentlig och kommersiell sektor. Utveckla säkra applikationer för identitets-, behörighets- och åtkomsthantering.

Öppna