Mindrift
Mindrift
Mindrift är en marknadsplats för talanger inom artificiell intelligens och en SaaS-plattform som kopplar samman professionella medverkande och ämnesexperter med projekt inom AI-träning och AI-utvärdering från teknikföretag. Som en del av Toloka samarbetar företaget med skribenter, redaktörer, kvalitetssäkringsspecialister, forskare och andra ämnesexperter som hjälper till att skapa träningsdata, bedöma modellsäkerhet och resonemang, utvärdera mediekvalitet samt skapa verklighetsbaserade scenarier för att förbättra AI-systemens prestanda och tillförlitlighet. Mindrift rekryterar och granskar medverkande genom bedömningar och identitetsverifiering och erbjuder därefter flexibla, betalda projekt inom AI-träning och AI-utvärdering.

Senioringenjör inom Python-webbskrapning (frilans, distansarbete)

Bygg och skala tillförlitliga arbetsflöden för web scraping i Python för Mindrifts AI-projekt. Extrahera, validera och leverera korrekta strukturerade data från komplexa, dynamiska webbplatser.

Beskrivning

  • Utför tekniskt precisa uppgifter inom web scraping och databearbetning
  • Hantera kompletta extraktionsarbetsflöden på komplexa webbplatser och leverera omfattande, korrekta och tillförlitliga strukturerade dataset
  • Använd tillgängliga verktyg och anpassade arbetsflöden för att effektivisera insamling, validering och slutförande av uppgifter enligt definierade krav
  • Anpassa extraktionsmetoder för JavaScript-renderade sidor, interaktiva källor och förändrat webbplatsbeteende
  • Tillämpa datakvalitetskontroller, inklusive validering, jämförelser mellan källor, formateringsstandarder och systematisk verifiering före leverans
  • Skala scraping av stora datamängder genom effektiv batchbearbetning eller parallell bearbetning
  • Följ upp extraktionsfel och upprätthåll driftsstabilitet vid mindre förändringar i webbplatsstrukturen
  • Använd Apify, OpenRouter och annan relevant teknik för att stödja scraping-verksamheten

Krav

  • Ha minst 5 års relevant erfarenhet av data engineering, web scraping, automatisering eller mjukvaruutveckling
  • Ha dokumenterat goda kunskaper i Python-baserad scraping med BeautifulSoup, Selenium eller jämförbara verktyg, dynamiskt innehåll och proxybaserade API:er
  • Extrahera information från komplexa strukturer, inklusive hierarkier, arkiverade sidor och oregelbunden HTML
  • Rensa, normalisera och validera data för leverans i CSV, JSON eller Google Sheets
  • Hantera antibot-skydd och föränderliga webbplatsstrukturer i stor skala
  • Arbeta med AWS eller jämförbar molninfrastruktur samt Docker-baserad containerisering
  • Tillämpa LLM-ramverk som LangChain, OpenRouter eller liknande verktyg i automatiseringsarbetsflöden
  • Upprätthålla exceptionell noggrannhet och datakvalitet
  • Arbeta självständigt och ta eget ansvar för felsökning
  • Kommunicera på engelska på övre medelnivå (B2) eller högre
  • En kandidat- eller masterexamen i ingenjörsvetenskap, tillämpad matematik, datavetenskap eller ett närliggande tekniskt område är meriterande
  • En länk till en GitHub-profil är meriterande

Förmåner

  • Frilansuppdrag
  • Deltidsarbete på distans
  • Cirka 10–20 timmar per vecka under aktiva projektfaser
  • Möjlighet att bidra till innovativa teknikprojekt via Mindrift-plattformen

Relaterade jobb

Eventogy

Produktutvecklare (frontend och fullstack)

Eventogy

Bygg Eventogys plattform för evenemangshantering med Next.js, React, TypeScript och Laravel, från administrationsverktyg och deltagarwebbplatser till API:er. Utveckla AI-assisterade funktioner för företagskunder i reglerade branscher.

Öppna
Creative information Technology

Senior Javautvecklare, på plats i Virginia

Creative information Technology
11 – 50 Anställda
B2BHårdvaraSäkerhet

Bygg skalbara Java-mikrotjänster för CITI, en IT-tjänsteleverantör för offentlig och kommersiell sektor. Utveckla säkra applikationer för identitets-, behörighets- och åtkomsthantering.

Öppna