Mindrift
Mindrift
Mindrift är en marknadsplats för talanger inom artificiell intelligens och en SaaS-plattform som kopplar samman professionella medverkande och ämnesexperter med projekt inom AI-träning och AI-utvärdering från teknikföretag. Som en del av Toloka samarbetar företaget med skribenter, redaktörer, kvalitetssäkringsspecialister, forskare och andra ämnesexperter som hjälper till att skapa träningsdata, bedöma modellsäkerhet och resonemang, utvärdera mediekvalitet samt skapa verklighetsbaserade scenarier för att förbättra AI-systemens prestanda och tillförlitlighet. Mindrift rekryterar och granskar medverkande genom bedömningar och identitetsverifiering och erbjuder därefter flexibla, betalda projekt inom AI-träning och AI-utvärdering.

Senior Pythoningenjör inom dataskrapning – distansarbete i Indien

Senior Pythoningenjör med ansvar för att bygga tillförlitliga arbetsflöden för dataskrapning inom Mindrifts Tendem AI-projekt. Rollen fokuserar på att extrahera, validera och skala strukturerad data från komplexa och dynamiska webbplatser.

Beskrivning

  • Hantera kompletta arbetsflöden för dataextraktion från komplexa webbplatser med bred täckning, hög noggrannhet och tillförlitlig leverans av strukturerade dataset.
  • Använd tillgängliga verktyg och skräddarsydda arbetsflöden för att förbättra datainsamling, validering och uppgiftsutförande enligt fastställda krav.
  • Extrahera data tillförlitligt från dynamiska och interaktiva källor genom att anpassa dig till JavaScript-renderat innehåll och förändrat webbplatsbeteende.
  • Säkerställ datakvaliteten genom valideringskontroller, jämförelser mellan källor, formateringskontroller och systematisk verifiering före leverans.
  • Skala dataskrapning i stora volymer genom effektiv batchbearbetning och parallell bearbetning.
  • Följ upp extraktionsfel och bevara arbetsflödenas stabilitet när mindre förändringar i webbplatsstrukturen uppstår.
  • Tillämpa expertis inom web scraping, dataextraktion och databehandling på verkliga användningsfall inom Tendem-projektet.

Krav

  • Minst 5 års relevant erfarenhet av data engineering, web scraping, automatisering eller programvaruutveckling.
  • Gedigen erfarenhet av Python-baserad scraping med BeautifulSoup, Selenium eller jämförbara verktyg, inklusive JavaScript, AJAX, oändlig scrollning och proxybaserad API-åtkomst.
  • Förmåga att extrahera information från komplexa strukturer som hierarkier, arkiverade sidor och inkonsekvent HTML.
  • Praktisk erfarenhet av att rensa, normalisera och validera data för leverans i formaten CSV, JSON eller Google Sheets.
  • Erfarenhet av att hantera antibot-åtgärder och föränderliga webbplatsstrukturer i storskaliga scrapingarbetsflöden.
  • Praktisk erfarenhet av AWS eller jämförbar molninfrastruktur samt Docker-baserad containerisering i produktionsarbetsflöden.
  • Erfarenhet av att använda LLM-ramverk som LangChain, OpenRouter eller liknande verktyg i automatiseringsuppgifter.
  • Stor noggrannhet och ett konsekvent fokus på datakvalitet.
  • Förmåga att arbeta självständigt, utreda problem och felsöka effektivt.
  • Engelska på övre mellannivå, B2 eller högre.

Förmåner

  • Frilansuppdrag.
  • Deltidsarbete på distans från Indien.
  • Cirka 10–20 timmar per vecka under aktiva projektfaser.

Relaterade jobb

Venture Media

Distansbaserad B2B-säljare inom försörjningskedjor och logistik

Venture Media

Vinn kanadensiska företagskunder för Chit Chats frakttjänster och vägled potentiella kunder från första kontakt och behovsanalys till offerter och kvalificering. Samordna överlämningar till kundteam och hjälp företag att skicka varor inom Kanada och internationellt.

Öppna
Walmart

Principal Software Engineer, moln och distribuerade system

Walmart

Led Walmart:s molnbaserade, AI-stödda mGPS/Compass-plattform och forma distribuerade tjänster och inomhusnavigering. Förbättra butiksdriften med robust arkitektur och tekniskt ledarskap.

Öppna
Marigold

Senior mjukvaruutvecklare, distans i Australien

Marigold

Bygg och modernisera Marigolds infrastruktur för meddelanden, molntjänster och marknadsföringsteknik. Arbeta med Java, Kafka, AWS, DevOps och AI-stött utvecklingsarbete.

Öppna
Cartonplast Group

Senior teamledare för ERP-programvaruutveckling – Cartonplast, hybridarbete i Tyskland

Cartonplast Group

Led Cartonplasts ERP-utvecklingsteam och forma arbetsflöden inom kommersiell verksamhet, logistik och produktion. Rollen kombinerar teamledning, samordning med verksamheten och praktiskt tekniskt arbete i en hybridroll i Tyskland.

Öppna