Mindrift er en talentmarkedsplads for kunstig intelligens og en SaaS-platform, der forbinder professionelle bidragydere og fageksperter med projekter inden for AI-træning og AI-evaluering fra teknologivirksomheder. Som en del af Toloka arbejder virksomheden med skribenter, redaktører, kvalitetssikringsspecialister, forskere og andre fageksperter, som hjælper med at generere træningsdata, vurdere modellers sikkerhed og ræsonnement, evaluere mediekvalitet og skabe virkelighedsnære scenarier for at forbedre AI-systemers ydeevne og pålidelighed. Mindrift rekrutterer og vurderer bidragydere gennem evalueringer og identitetsverificering og tilbyder derefter fleksible, betalte projektmuligheder inden for AI-træning og AI-evaluering.
Senior Pythoningeniør inden for dataindsamling – fjernarbejde i Filippinerne
Mindrift søger en senior Pythoningeniør til at opbygge pålidelige workflows til dataindsamling i AI-projekter. Rollen fokuserer på at udtrække, validere og skalere strukturerede data fra komplekse og dynamiske websites.
Beskrivelse
- Håndtere komplette dataudtræksprocesser på tværs af komplekse websites
- Producere strukturerede datasæt, der er grundige, nøjagtige og pålidelige
- Anvende værktøjer og skræddersyede workflows for at effektivisere indsamling, validering og levering af opgaver
- Indsamle information fra dynamiske og interaktive kilder, herunder JavaScript-renderede sider
- Tilpasse scraping-metoder, efterhånden som websites adfærd og struktur ændrer sig
- Sikre datakvalitet gennem validering, sammenligning på tværs af kilder, formateringsregler og systematisk kontrol
- Skalere scraping af store datamængder med effektiv batchbehandling og parallel behandling
- Følge fejl i dataudtrækket og bevare workflowets stabilitet ved mindre ændringer på websites
Krav
- Mindst fem års relevant erfaring med data engineering, web scraping, automatisering eller softwareudvikling
- En bachelor- eller kandidatgrad inden for ingeniørvidenskab, anvendt matematik, datalogi eller et beslægtet teknisk område er en fordel
- Dokumenteret erfaring med Python-baseret scraping ved hjælp af BeautifulSoup, Selenium eller tilsvarende værktøjer, dynamisk indhold og proxierede API'er
- Kunne udtrække information fra komplekse kilder såsom hierarkier, arkiverede sider og inkonsekvent HTML
- Kunne rense, normalisere og validere data til levering i formaterne CSV, JSON eller Google Sheets
- Kunne håndtere antibot-beskyttelse og skiftende websitestrukturer i storskala scrapingprojekter
- Erfaring med AWS eller tilsvarende cloudinfrastruktur samt Docker-baseret containerisering
- Kunne anvende LLM-frameworks som LangChain, OpenRouter eller lignende værktøjer i automatiseringsworkflows
- Arbejde med enestående sans for detaljer og et konsekvent fokus på datanøjagtighed
- Arbejde selvstændigt samt diagnosticere og løse tekniske problemer
- Kommunikere på engelsk på øvre mellemniveau (B2) eller højere
Fordele
- freelanceprojekt
- Deltidsarbejde på afstand
- Omkring 10–20 timer om ugen i aktive projektperioder
- Kompensation på op til det tilsvarende 30 USD pr. time, afhængigt af erfaringsniveau og arbejdstempo