Mindrift
Mindrift
501 – 1.000 Medarbejdere
Kunstig intelligensMarkedspladsSaaS
Mindrift er en talentmarkedsplads for kunstig intelligens og en SaaS-platform, der forbinder professionelle bidragydere og fageksperter med projekter inden for AI-træning og AI-evaluering fra teknologivirksomheder. Som en del af Toloka arbejder virksomheden med skribenter, redaktører, kvalitetssikringsspecialister, forskere og andre fageksperter, som hjælper med at generere træningsdata, vurdere modellers sikkerhed og ræsonnement, evaluere mediekvalitet og skabe virkelighedsnære scenarier for at forbedre AI-systemers ydeevne og pålidelighed. Mindrift rekrutterer og vurderer bidragydere gennem evalueringer og identitetsverificering og tilbyder derefter fleksible, betalte projektmuligheder inden for AI-træning og AI-evaluering.

Senior Python-ingeniør inden for datascraping – freelance på afstand

Mindrift søger en senior Python-ingeniør til at opbygge pålidelige workflows til webscraping og databehandling i AI-projekter. Rollen fokuserer på at udtrække, validere og skalere strukturerede datasæt fra komplekse websteder.

Beskrivelse

  • Lede dataekstraktionsworkflows fra start til slut på komplekse websteder
  • Levere komplette, nøjagtige og pålidelige strukturerede datasæt
  • Anvende tilgængelige værktøjer og tilpassede workflows for at effektivisere dataindsamling, validering og opgaveudførelse
  • Indsamle data fra dynamiske og interaktive kilder ved at tilpasse sig JavaScript-renderet indhold og ændret webstedsadfærd
  • Opretholde datakvaliteten gennem valideringskontroller, kontrol af overensstemmelse på tværs af kilder, formateringskrav og systematisk verificering
  • Opskalere scraping af store datasæt gennem effektiv batchbehandling eller parallel behandling
  • Overvåge fejl og bevare scraperens stabilitet ved mindre ændringer i websteders struktur
  • Arbejde med Apify, OpenRouter og andre relevante teknologier

Krav

  • Mindst 5 års relevant erfaring med data engineering, webscraping, automatisering eller softwareudvikling
  • Engelsk på øvre mellemniveau svarende til B2 eller højere
  • Stærk erfaring med Python-scraping ved hjælp af BeautifulSoup, Selenium eller tilsvarende værktøjer, dynamisk indhold som JavaScript, AJAX og uendelig scroll samt proxybaserede API'er
  • Evne til at udtrække information fra komplekse strukturer, herunder hierarkier, arkiverede sider og inkonsekvent HTML
  • Erfaring med at rense, normalisere og validere data til levering i CSV, JSON eller Google Sheets
  • Erfaring med at håndtere antibotmekanismer og skiftende webstedsstrukturer i stor skala
  • Praktisk erfaring med AWS eller tilsvarende cloudinfrastruktur samt Docker-containerisering
  • Praktisk erfaring med LangChain, OpenRouter eller lignende LLM-frameworks til automatisering
  • Stor sans for detaljer og stærkt fokus på datanøjagtighed
  • Evne til at arbejde selvstændigt og fejlfinde effektivt
  • En bachelor- eller kandidatgrad i ingeniørvidenskab, anvendt matematik, datalogi eller en beslægtet teknisk disciplin er en fordel
  • Et link til en GitHub-profil er en fordel

Fordele

  • Freelanceopgave
  • Deltidsarbejde på afstand
  • Cirka 10–20 timer om ugen i aktive projektfaser
  • Op til hvad der svarer til 40 USD i timen, afhængigt af erfaringsniveau og arbejdshastighed

Relaterede job

Terumo Medical Corporation

Territoriechef, interventionelle systemer — Philadelphia

Terumo Medical Corporation

Lede salget af Terumo Interventional Systems-produkter til hospitaler og ambulante behandlingssteder i Philadelphiaområdet. Udvikle kundekonti, støtte indgreb, undervise klinikere og nå distriktets salgsmål.

Åbn