Mindrift
Mindrift
Mindrift är en marknadsplats för talanger inom artificiell intelligens och en SaaS-plattform som kopplar samman professionella medverkande och ämnesexperter med projekt inom AI-träning och AI-utvärdering från teknikföretag. Som en del av Toloka samarbetar företaget med skribenter, redaktörer, kvalitetssäkringsspecialister, forskare och andra ämnesexperter som hjälper till att skapa träningsdata, bedöma modellsäkerhet och resonemang, utvärdera mediekvalitet samt skapa verklighetsbaserade scenarier för att förbättra AI-systemens prestanda och tillförlitlighet. Mindrift rekryterar och granskar medverkande genom bedömningar och identitetsverifiering och erbjuder därefter flexibla, betalda projekt inom AI-träning och AI-utvärdering.

Senior Pythoningenjör inom datainsamling – frilans på distans

Mindrift söker en senior Pythoningenjör som ska bygga tillförlitliga arbetsflöden för web scraping och databearbetning för AI-projekt. Rollen fokuserar på att extrahera, validera och skala strukturerade datamängder från komplexa webbplatser.

Beskrivning

  • Leda arbetsflöden för dataextraktion från början till slut på komplexa webbplatser
  • Leverera fullständiga, korrekta och tillförlitliga strukturerade datamängder
  • Använda tillgängliga verktyg och anpassade arbetsflöden för att effektivisera datainsamling, validering och uppgiftsutförande
  • Samla in data från dynamiska och interaktiva källor genom att anpassa sig till JavaScript-renderat innehåll och förändrat webbplatsbeteende
  • Säkerställa datakvalitet genom valideringskontroller, granskning av överensstämmelse mellan källor, formateringskrav och systematisk verifiering
  • Skala scraping av stora datamängder genom effektiv batchhantering eller parallell bearbetning
  • Övervaka fel och upprätthålla scraper-stabilitet vid mindre förändringar i webbplatsers struktur
  • Arbeta med Apify, OpenRouter och annan relevant teknik

Krav

  • Minst 5 års relevant erfarenhet av data engineering, web scraping, automatisering eller mjukvaruutveckling
  • Engelska på övre medelnivå, motsvarande B2 eller högre
  • Gedigen erfarenhet av Python-baserad scraping med BeautifulSoup, Selenium eller motsvarande verktyg, dynamiskt innehåll som JavaScript, AJAX och oändlig scrollning samt proxybaserade API:er
  • Förmåga att extrahera information ur komplexa strukturer, inklusive hierarkier, arkiverade sidor och inkonsekvent HTML
  • Erfarenhet av att rensa, normalisera och validera data för leverans i CSV, JSON eller Google Sheets
  • Erfarenhet av att hantera antibotmekanismer och föränderliga webbplatsstrukturer i stor skala
  • Praktisk erfarenhet av AWS eller motsvarande molninfrastruktur samt Docker-containerisering
  • Praktisk erfarenhet av LangChain, OpenRouter eller liknande LLM-ramverk för automatisering
  • Stor noggrannhet och ett starkt engagemang för datakvalitet
  • Förmåga att arbeta självständigt och felsöka effektivt
  • En kandidat- eller masterexamen i ingenjörsvetenskap, tillämpad matematik, datavetenskap eller ett närliggande tekniskt område är meriterande
  • En länk till en GitHub-profil är meriterande

Förmåner

  • Frilansuppdrag
  • Distansarbete på deltid
  • Cirka 10–20 timmar per vecka under aktiva projektfaser
  • Upp till motsvarande 40 USD per timme, beroende på erfarenhetsnivå och arbetstakt

Relaterade jobb

SPERTON - Where Great People Meet

Säljare av hissar och parkeringssystem

SPERTON - Where Great People Meet
51 – 200 Anställda

Driv försäljningen av hissar och parkeringssystem i Mumbais västra region. Bygg relationer med kunder och återförsäljare och hantera affärer från första förfrågan till projektgenomförande.

Öppna