Mindrift
Mindrift
Mindrift is een talentmarktplaats en SaaS-platform voor kunstmatige intelligentie dat professionele bijdragers en vakspecialisten in contact brengt met projecten van technologiebedrijven voor het trainen en evalueren van AI. Als onderdeel van Toloka werkt Mindrift samen met schrijvers, redacteuren, QA-specialisten, wetenschappers en andere inhoudelijke experts die trainingsgegevens helpen creëren, de veiligheid en het redeneervermogen van modellen beoordelen, de kwaliteit van media evalueren en realistische scenario's ontwikkelen om de prestaties en betrouwbaarheid van AI te verbeteren. Mindrift werft bijdragers en controleert hen via beoordelingen en identiteitsverificatie, waarna het flexibele, betaalde projectmogelijkheden biedt binnen AI-training en -evaluatie.

Senior Python-engineer voor webscraping – freelance, op afstand vanuit India

Mindrift zoekt een senior Python-engineer om gestructureerde workflows voor webdata voor het Tendem AI-project te extraheren, valideren en schalen. De functie omvat Python, cloudinfrastructuur, Docker en op LLM gebaseerde automatiseringsframeworks.

Beschrijving

  • Volledige workflows voor gegevensextractie van complexe websites beheren
  • Gestructureerde datasets met uitgebreide dekking, hoge nauwkeurigheid en betrouwbare doorlooptijden opleveren
  • Gespecialiseerde tools en aangepaste workflows gebruiken om verzameling, validatie en taakuitvoering te versnellen
  • Informatie ophalen uit dynamische en interactieve bronnen, waaronder JavaScript-gerenderde pagina’s
  • Scrapingmethoden aanpassen wanneer websitegedrag en paginastructuren veranderen
  • De datakwaliteit bewaken via validatie, controles tussen bronnen, formatteringsstandaarden en systematische beoordeling
  • Scraping van grote volumes opschalen met efficiënte batchverwerking en parallelle verwerking
  • Fouten bijhouden en betrouwbare, stabiele scrapingactiviteiten ondersteunen
  • Expertise in Python, webscraping, gegevensextractie en gegevensverwerking toepassen op het Tendem-project

Vereisten

  • Minimaal 5 jaar relevante ervaring in data-engineering, webscraping, automatisering of softwareontwikkeling
  • Een bachelor- of masterdiploma in engineering, toegepaste wiskunde, computerwetenschappen of een vergelijkbare technische richting is een pluspunt
  • Sterke praktische basis in scripting, automatisering en workflows voor gegevensextractie
  • Uitgebreide ervaring met Python-scraping, BeautifulSoup, Selenium of vergelijkbare tools, dynamische content en proxygebaseerde API’s
  • In staat om informatie uit complexe structuren te extraheren, waaronder hiërarchieën, gearchiveerde pagina’s en inconsistente HTML
  • Sterke ervaring met het opschonen, normaliseren en valideren van gegevens
  • Praktische ervaring met het beheren van antibotbeveiliging en dynamische websitestructuren op grote schaal
  • Ervaring met AWS of vergelijkbare cloudinfrastructuur en Docker-containerisatie
  • Praktische ervaring met LangChain, OpenRouter of vergelijkbare LLM-frameworks voor automatisering
  • Nauwkeurige werkwijze met veel aandacht voor gegevensnauwkeurigheid en -kwaliteit
  • In staat om zelfstandig te werken, problemen op te lossen en taken proactief te beheren
  • Engels op upper-intermediate niveau (B2) of hoger
  • Een GitHub-link is een pluspunt

Voordelen

  • Freelanceopdracht
  • Parttime werken op afstand vanuit India
  • Ongeveer 10–20 uur per week tijdens actieve projectfasen
  • Mogelijkheden om via het Mindrift-platform aan technologieprojecten te werken
  • Vergoeding van maximaal het equivalent van 30 dollar per uur, afhankelijk van ervaringsniveau en werktempo

Gerelateerde vacatures

Eventogy

Product Engineer (Frontend en Full Stack)

Eventogy
11 – 50 Medewerkers
AdviesMarketingReizen

Bouw aan Eventogy’s platform voor evenementenbeheer met Next.js, React, TypeScript en Laravel, van beheertools en deelnemerswebsites tot API’s. Ontwikkel AI-ondersteunde functies voor zakelijke klanten in gereguleerde sectoren.

Openen
Creative information Technology

Senior Java-ontwikkelaar op locatie in Virginia

Creative information Technology
11 – 50 Medewerkers
B2BBeveiligingHardware

Bouw schaalbare Java-microservices voor CITI, een IT-dienstverlener voor overheids- en commerciële klanten. Ontwikkel veilige toepassingen voor identiteits-, referentie- en toegangsbeheer.

Openen