Mindrift
Mindrift
Mindrift is een talentmarktplaats en SaaS-platform voor kunstmatige intelligentie dat professionele bijdragers en vakspecialisten in contact brengt met projecten van technologiebedrijven voor het trainen en evalueren van AI. Als onderdeel van Toloka werkt Mindrift samen met schrijvers, redacteuren, QA-specialisten, wetenschappers en andere inhoudelijke experts die trainingsgegevens helpen creëren, de veiligheid en het redeneervermogen van modellen beoordelen, de kwaliteit van media evalueren en realistische scenario's ontwikkelen om de prestaties en betrouwbaarheid van AI te verbeteren. Mindrift werft bijdragers en controleert hen via beoordelingen en identiteitsverificatie, waarna het flexibele, betaalde projectmogelijkheden biedt binnen AI-training en -evaluatie.

Senior Python Webscraping Engineer (Freelance, op afstand vanuit Portugal)

Bouw betrouwbare pipelines voor webscraping en gegevensverwerking voor Mindrifts Tendem AI-project. Extraheer, valideer en schaal gestructureerde datasets uit complexe en dynamische websites.

Beschrijving

  • Beheer de volledige extractie uit complexe websites en lever volledige, nauwkeurige en betrouwbare gestructureerde datasets
  • Gebruik tools en aangepaste workflows om gegevensverzameling, validatie en taakuitvoering te versnellen
  • Verzamel gegevens uit dynamische en interactieve bronnen en pas je aan JavaScript-gerenderde inhoud en veranderend websitegedrag aan
  • Bewaar de gegevenskwaliteit met validatiecontroles, vergelijkingen tussen bronnen, opmaakeisen en systematische controles
  • Schaal scrapingactiviteiten voor grote datasets met efficiënte batchverwerking of parallelle verwerking
  • Volg extractiefouten op en behoud de stabiliteit wanneer websites kleine structurele wijzigingen ondergaan
  • Gebruik expertise in webscraping, gegevensextractie en gegevensverwerking binnen gespecialiseerde Tendem-projectworkflows

Vereisten

  • Minimaal vijf jaar relevante ervaring in data-engineering, webscraping, automatisering of softwareontwikkeling
  • Aantoonbare sterke Python-scrapingvaardigheden met BeautifulSoup, Selenium of vergelijkbare tools, JavaScript- en AJAX-inhoud, oneindig scrollen, API's en proxy's
  • In staat om informatie te extraheren uit complexe hiërarchieën, gearchiveerde pagina's en inconsistente HTML
  • Een stevige basis in gegevensopschoning, normalisatie en validatie, met ervaring in het produceren van gestructureerde datasets in CSV, JSON en Google Sheets
  • Ervaring met het beheren van antibotbeveiliging en veranderende sitestructuren op grote schaal
  • Ervaring met AWS of vergelijkbare cloudinfrastructuur en containerisatie op basis van Docker
  • Praktische ervaring met het toepassen van LLM-frameworks zoals LangChain, OpenRouter of vergelijkbare tools voor automatiseringstaken
  • Zeer nauwkeurig werken en consequent gericht zijn op gegevenskwaliteit
  • Zelfstandig werken, verantwoordelijkheid nemen voor probleemoplossing en proactief te werk gaan
  • Engels op Upper-intermediate-niveau (B2) of hoger
  • Een bachelor- of masterdiploma in engineering, toegepaste wiskunde, computerwetenschappen of een vergelijkbare technische richting is een pluspunt
  • Een link naar een GitHub-profiel is een pluspunt

Voordelen

  • Freelanceopdracht
  • Parttime inzet van naar schatting 10–20 uur per week tijdens actieve projectfasen
  • Werk op afstand
  • Mogelijkheid om via het Mindrift-platform aan innovatieve technologieprojecten te werken

Gerelateerde vacatures

TÜV TRUST IT Unternehmensgruppe TÜV AUSTRIA

Junior securityauditor elektronische identiteiten en vertrouwensdiensten

TÜV TRUST IT Unternehmensgruppe TÜV AUSTRIA

Adviseer over en audit elektronische identiteiten en vertrouwensdiensten voor het certificeringswerk rond informatiebeveiliging van TÜV. Beoordeel beveiligingsmaatregelen, rapporteer bevindingen en coördineer complexe complianceprojecten.

Openen