Mindrift
Mindrift
Mindrift is een talentmarktplaats en SaaS-platform voor kunstmatige intelligentie dat professionele bijdragers en vakspecialisten in contact brengt met projecten van technologiebedrijven voor het trainen en evalueren van AI. Als onderdeel van Toloka werkt Mindrift samen met schrijvers, redacteuren, QA-specialisten, wetenschappers en andere inhoudelijke experts die trainingsgegevens helpen creëren, de veiligheid en het redeneervermogen van modellen beoordelen, de kwaliteit van media evalueren en realistische scenario's ontwikkelen om de prestaties en betrouwbaarheid van AI te verbeteren. Mindrift werft bijdragers en controleert hen via beoordelingen en identiteitsverificatie, waarna het flexibele, betaalde projectmogelijkheden biedt binnen AI-training en -evaluatie.

Senior Python-webscraping-engineer – Freelance op afstand

Bouw betrouwbare Python-workflows voor webscraping en gegevensverwerking voor de AI-projecten van Mindrift. Extraheer, valideer en schaal gestructureerde datasets van complexe, dynamische websites.

Beschrijving

  • Beheer end-to-end-extractieworkflows voor complexe websites en lever complete, nauwkeurige, gestructureerde datasets op
  • Gebruik beschikbare tools en aangepaste workflows om gegevensverzameling, validatie en taakuitvoering volgens vastgestelde vereisten te versnellen
  • Pas extractiemethoden aan voor door JavaScript gegenereerde content, interactieve bronnen en veranderend websitegedrag
  • Pas validatie, controles tussen bronnen, opmaakcontroles en systematische verificatie toe om de gegevenskwaliteit te behouden
  • Schaal scraping van grote datasets met efficiënte batchverwerking of parallelle verwerking
  • Monitor extractiefouten en behoud de stabiliteit bij kleine wijzigingen in de sitestructuur
  • Gebruik expertise in webscraping, gegevensextractie en gegevensverwerking met tools zoals Apify, OpenRouter en aanverwante technologieën

Vereisten

  • Minimaal 5 jaar relevante ervaring in data-engineering, webscraping, automatisering of softwareontwikkeling
  • Een bachelor- of masterdiploma in engineering, toegepaste wiskunde, computerwetenschappen of een vergelijkbaar technisch vakgebied is een pluspunt
  • Sterke technische basis met praktische ervaring in scripting, automatisering en workflows voor gegevensextractie
  • Uitgebreide ervaring met Python-scraping en BeautifulSoup, Selenium of vergelijkbare tools, waaronder JavaScript, AJAX, infinite scroll en proxygebaseerde API's
  • Vermogen om gegevens te extraheren uit complexe hiërarchieën, gearchiveerde pagina's en inconsistente HTML-structuren
  • Ervaring met het opschonen, normaliseren en valideren van gestructureerde datasets in CSV, JSON of Google Sheets
  • Ervaring met het omgaan met anti-botmechanismen en veranderende sitestructuren op grote schaal
  • Praktische ervaring met AWS of vergelijkbare cloudinfrastructuur en Docker-containerisatie
  • Praktische ervaring met LangChain, OpenRouter of vergelijkbare LLM-frameworks voor automatiseringstaken
  • Sterk oog voor detail en grote toewijding aan gegevensnauwkeurigheid
  • Zelfstandige werkhouding met het vermogen om problemen onafhankelijk op te lossen
  • Engels op upper-intermediate niveau (B2) of hoger
  • Een GitHub-link is een pluspunt

Voordelen

  • Freelanceopdracht
  • Parttime werken op afstand
  • Ongeveer 10–20 uur per week tijdens actieve projectfasen

Gerelateerde vacatures

Mindrift

Senior Python-webscraping-engineer – Op afstand vanuit Brazilië

Mindrift

Als senior Python-engineer ben je verantwoordelijk voor betrouwbaar webscrapen, datavalidatie en het opleveren van gestructureerde datasets voor de AI-technologieprojecten van Mindrift. De functie omvat dynamische websites, antibotsystemen, cloudinfrastructuur en automatiseringstools op basis van LLM's.

Openen
Mindrift

Senior Python-engineer voor datascraping – freelance, remote in Polen

Mindrift

Mindrift zoekt een senior Python-engineer voor het bouwen van betrouwbare webscrapingworkflows voor AI-projecten. De functie richt zich op het extraheren, valideren en verwerken van gestructureerde gegevens van complexe, dynamische websites.

Openen
Mindrift

Senior Python Data-Scraping Engineer – Op afstand in Roemenië

Mindrift

Senior Python-engineer verantwoordelijk voor het bouwen van betrouwbare webscraping- en dataverwerkingsworkflows voor Mindrifts Tendem AI-project. De functie richt zich op het extraheren, valideren en opschalen van gestructureerde datasets uit complexe websites.

Openen