LogoFresh Jobs Ahead
Mindrift
Mindrift
501 – 1 000 Anställda
Artificiell intelligensMarknadsplatsSaaS
Mindrift är en marknadsplats för talanger inom artificiell intelligens och en SaaS-plattform som kopplar samman professionella medverkande och ämnesexperter med projekt inom AI-träning och AI-utvärdering från teknikföretag. Som en del av Toloka samarbetar företaget med skribenter, redaktörer, kvalitetssäkringsspecialister, forskare och andra ämnesexperter som hjälper till att skapa träningsdata, bedöma modellsäkerhet och resonemang, utvärdera mediekvalitet samt skapa verklighetsbaserade scenarier för att förbättra AI-systemens prestanda och tillförlitlighet. Mindrift rekryterar och granskar medverkande genom bedömningar och identitetsverifiering och erbjuder därefter flexibla, betalda projekt inom AI-träning och AI-utvärdering.
LinkedIn
Jobb på företaget

Senior Pythoningenjör inom dataskrapning (frilans, distansarbete i Saudiarabien)

Senior Pythoningenjör som utvecklar skalbara arbetsflöden för dataskrapning till Mindrifts Tendem AI-projekt. Rollen fokuserar på att extrahera, validera och strukturera komplex webbdata med Python och automationsverktyg.

AEFörenade ArabemiratenBHBahrainKWKuwaitOMOmanQAQatarSASaudiarabien
37 $ / timme
DistansDeltidSeniorObligatoriskt Språk: engelskaBackendutvecklareMjukvaruingenjör
AWSDockerJavaScriptMolnPythonSelenium

Beskrivning

  • Leda specialiserade arbetsflöden för dataskrapning inom Mindrifts Tendem-projekt och dess tillämpningar i verkligheten
  • Hantera extraktionspipelines från början till slut på komplexa webbplatser
  • Skapa fullständiga, korrekta, tillförlitliga och välstrukturerade dataset
  • Använda Apify, OpenRouter och anpassade arbetsflöden för att effektivisera insamling, validering och uppgiftsutförande
  • Samla in data från dynamiska, interaktiva källor och anpassa arbetet till JavaScript-renderat innehåll och förändrat webbplatsbeteende
  • Säkerställa datakvaliteten genom valideringskontroller, jämförelser mellan källor, formateringskontroller och systematisk verifiering
  • Skala dataskrapning i stora volymer genom effektiv batchkörning och parallell bearbetning
  • Utreda fel och upprätthålla pipeline-stabilitet vid mindre förändringar i webbplatsers struktur
  • Självständigt lösa komplexa utmaningar inom skriptning, automatisering, extraktion, datastrukturering och validering

Krav

  • Minst 5 års relevant erfarenhet av data engineering, web scraping, automatisering eller programvaruutveckling
  • Engelska på övre medelnivå (B2) eller högre
  • Avancerad erfarenhet av Python-baserad dataskrapning med BeautifulSoup, Selenium eller jämförbara verktyg, dynamiskt JavaScript/AJAX-innehåll, oändlig rullning och proxybaserade API:er
  • Förmåga att extrahera information från komplexa hierarkier, arkiverade sidor och inkonsekvent HTML
  • Goda kunskaper i datarensning, normalisering och validering
  • Praktisk erfarenhet av att hantera antibot-skydd och förändrade webbplatsstrukturer i stor skala
  • Erfarenhet av AWS eller jämförbar molninfrastruktur
  • Erfarenhet av att paketera applikationer med Docker
  • Praktisk användning av LangChain, OpenRouter eller liknande LLM-ramverk för automatisering
  • Stor noggrannhet och starkt fokus på datakvalitet
  • Självgående arbetssätt och trygghet i att felsöka självständigt
  • Kandidat- eller masterexamen i ingenjörsvetenskap, tillämpad matematik, datavetenskap eller en närliggande teknisk disciplin är meriterande
  • Länk till en GitHub-profil är meriterande

Förmåner

  • Flexibelt deltidsuppdrag som frilansare
  • Förväntad arbetsinsats på 10–20 timmar i veckan under aktiva projektperioder
  • Ersättning på upp till motsvarande 37 dollar per timme, beroende på erfarenhetsnivå och arbetstakt
  • Möjlighet att bidra till innovativa projekt inom AI- och teknikutveckling
  • Helt distansbaserat arbete

Relaterade jobb