Mindrift
Mindrift
Mindrift är en marknadsplats för talanger inom artificiell intelligens och en SaaS-plattform som kopplar samman professionella medverkande och ämnesexperter med projekt inom AI-träning och AI-utvärdering från teknikföretag. Som en del av Toloka samarbetar företaget med skribenter, redaktörer, kvalitetssäkringsspecialister, forskare och andra ämnesexperter som hjälper till att skapa träningsdata, bedöma modellsäkerhet och resonemang, utvärdera mediekvalitet samt skapa verklighetsbaserade scenarier för att förbättra AI-systemens prestanda och tillförlitlighet. Mindrift rekryterar och granskar medverkande genom bedömningar och identitetsverifiering och erbjuder därefter flexibla, betalda projekt inom AI-träning och AI-utvärdering.

Senioringenjör inom Python och datainsamling (deltid, distansarbete i Georgia)

Mindrift söker en senior Pythoningenjör som ska bygga tillförlitliga arbetsflöden för datainsamling till AI-teknikprojekt. Rollen fokuserar på att extrahera, validera och skala strukturerade dataset från komplexa och dynamiska webbplatser.

Beskrivning

  • Hantera datautvinningsflöden från början till slut på komplexa webbplatser
  • Leverera fullständiga, korrekta och tillförlitliga strukturerade dataset
  • Använd tillgängliga verktyg och anpassade arbetsflöden för att effektivisera datainsamling, validering och genomförande av uppgifter
  • Extrahera data från dynamiska och interaktiva webbkällor, inklusive JavaScript-renderade sidor
  • Anpassa insamlingsmetoder när webbplatsers beteende förändras
  • Säkerställ datakvaliteten genom valideringskontroller, konsekvenskontroller mellan källor, formateringskrav och systematisk verifiering
  • Skala datainsamling från stora dataset med effektiv batchhantering eller parallell bearbetning
  • Övervaka fel och bevara stabiliteten vid mindre förändringar av webbplatsers struktur
  • Kombinera verktyg som Apify och OpenRouter med relevant teknisk expertis

Krav

  • Minst 5 års relevant erfarenhet av data engineering, web scraping, automatisering eller mjukvaruutveckling
  • Kandidat- eller masterexamen inom ingenjörsvetenskap, tillämpad matematik, datavetenskap eller ett närliggande tekniskt område är meriterande
  • Gedigen erfarenhet av web scraping i Python med BeautifulSoup, Selenium eller jämförbara verktyg, dynamiskt innehåll och API:er som nås via proxyservrar
  • Dokumenterad förmåga att extrahera information från komplexa strukturer, inklusive hierarkier, arkiverade sidor och inkonsekvent HTML
  • Gedigen erfarenhet av att rensa, normalisera och validera data för leverans i CSV, JSON eller Google Sheets
  • Praktisk erfarenhet av att hantera antibotmekanismer och dynamiska webbplatsstrukturer i stor skala
  • Erfarenhet av AWS eller jämförbar molninfrastruktur samt containerisering med Docker
  • Praktisk erfarenhet av att använda LLM-ramverk som LangChain eller OpenRouter i automatiseringsuppgifter
  • Mycket god känsla för detaljer och starkt fokus på datanoggrannhet
  • Förmåga att arbeta självständigt och felsöka problem utan nära handledning
  • Engelska på övre mellannivå (B2) eller högre
  • En länk till en GitHub-profil är meriterande

Förmåner

  • Deltidsuppdrag som frilansare på distans
  • Cirka 10–20 timmar per vecka under aktiva projektfaser
  • Arbeta med teknik- och AI-utvecklingsprojekt

Relaterade jobb

Grupo A365

Distansbaserad säljrepresentant för callcenter, Peru

Grupo A365

Bli en del av Grupo A365 som distansbaserad säljrepresentant och hjälp potentiella kunder via callcenterförsäljning. Hantera kundfrågor, arbeta mot försäljningsmål och använd din förhandlingsförmåga för att nå resultat.

Öppna