Mindrift
Mindrift
Mindrift är en marknadsplats för talanger inom artificiell intelligens och en SaaS-plattform som kopplar samman professionella medverkande och ämnesexperter med projekt inom AI-träning och AI-utvärdering från teknikföretag. Som en del av Toloka samarbetar företaget med skribenter, redaktörer, kvalitetssäkringsspecialister, forskare och andra ämnesexperter som hjälper till att skapa träningsdata, bedöma modellsäkerhet och resonemang, utvärdera mediekvalitet samt skapa verklighetsbaserade scenarier för att förbättra AI-systemens prestanda och tillförlitlighet. Mindrift rekryterar och granskar medverkande genom bedömningar och identitetsverifiering och erbjuder därefter flexibla, betalda projekt inom AI-träning och AI-utvärdering.

Senior Python-ingenjör inom webbskrapning i Mexiko (distans)

Bygg och skala tillförlitliga webbskrapningsflöden för Mindrifts AI-plattform. Extrahera, validera och leverera strukturerade data från komplexa, dynamiska webbplatser.

Beskrivning

  • Hantera extraktionsflöden från början till slut på komplexa webbplatser och leverera fullständiga, korrekta och tillförlitliga strukturerade dataset.
  • Använd tillgängliga verktyg och anpassade arbetsflöden för att effektivisera insamling, validering och uppgiftsutförande enligt definierade krav.
  • Extrahera data tillförlitligt från dynamiska och interaktiva källor genom att anpassa dig till JavaScript-renderat innehåll och förändrat webbplatsbeteende.
  • Säkerställ datakvaliteten genom valideringskontroller, granskning av överensstämmelse mellan källor, formateringskrav och systematisk verifiering före leverans.
  • Skala webbskrapning i stora volymer genom effektiv batchhantering och parallell bearbetning.
  • Följ upp extraktionsfel och upprätthåll driftsstabilitet när webbplatsstrukturer förändras något.
  • Arbeta med Tendem Agents som utför repetitiva uppgifter inom Mindrifts hybrida arbetsmodell med AI och människor.
  • Använd verktyg som Apify, OpenRouter och annan teknik tillsammans med teknisk expertis och anpassade metoder.
  • Använd expertis inom webbskrapning, dataextraktion och databearbetning för att skapa korrekta, tillförlitliga och högkvalitativa resultat.

Krav

  • Minst fem års relevant erfarenhet av data engineering, webbskrapning, automatisering eller mjukvaruutveckling krävs.
  • En kandidat- eller masterexamen i ingenjörsvetenskap, tillämpad matematik, datavetenskap eller ett närliggande tekniskt ämnesområde är meriterande.
  • Gedigen erfarenhet av Python-baserad webbskrapning med BeautifulSoup, Selenium eller jämförbara verktyg, inklusive JavaScript, AJAX, oändlig scrollning och proxifierade API:er.
  • Förmåga att extrahera information från komplexa strukturer som hierarkier, arkiverade sidor och inkonsekvent HTML.
  • Praktisk erfarenhet av att rensa, normalisera och validera data för strukturerad leverans i CSV, JSON eller Google Sheets.
  • Erfarenhet av att hantera antibot-åtgärder och föränderliga webbplatsstrukturer i stor skala.
  • Praktisk erfarenhet av AWS eller jämförbar molninfrastruktur samt Docker i produktionsarbetsflöden.
  • Erfarenhet av att använda LLM-ramverk som LangChain eller OpenRouter för automatiseringsuppgifter.
  • Exceptionell noggrannhet och ett konsekvent fokus på datakvalitet.
  • Förmåga att arbeta självständigt, utreda problem och felsöka effektivt.
  • Engelska på övre mellannivå, B2 eller högre, krävs.
  • En länk till en GitHub-profil är meriterande.

Förmåner

  • Frilansuppdrag.
  • Deltidsarbete på distans.
  • Uppskattningsvis 10–20 timmar per vecka under aktiva projektfaser.

Relaterade jobb

Terumo Medical Corporation

Regionchef, Terumo Interventional Systems försäljning

Terumo Medical Corporation

Led försäljningen av medicintekniska produkter i en region i North Central New Jersey och ansvarade för fältteam och sjukhusrelationer. Driv regionala intäkter och försäljningsresultat samt säkerställ regelriktig marknadsföring av Terumo Interventional Systems produkter.

Öppna
Claroty

QA-automatiseringsingenjör

Claroty

Utveckla API- och UI-automation samt kvalitetsgrindar i CI/CD för Clarotys plattform för cybersäkerhet inom cyberfysiska system. Bidra till att skydda kritisk infrastruktur genom tillförlitlig testning.

Öppna