Mindrift
Mindrift
501 – 1.000 Medarbejdere
Kunstig intelligensMarkedspladsSaaS
Mindrift er en talentmarkedsplads for kunstig intelligens og en SaaS-platform, der forbinder professionelle bidragydere og fageksperter med projekter inden for AI-træning og AI-evaluering fra teknologivirksomheder. Som en del af Toloka arbejder virksomheden med skribenter, redaktører, kvalitetssikringsspecialister, forskere og andre fageksperter, som hjælper med at generere træningsdata, vurdere modellers sikkerhed og ræsonnement, evaluere mediekvalitet og skabe virkelighedsnære scenarier for at forbedre AI-systemers ydeevne og pålidelighed. Mindrift rekrutterer og vurderer bidragydere gennem evalueringer og identitetsverificering og tilbyder derefter fleksible, betalte projektmuligheder inden for AI-træning og AI-evaluering.

Senioringeniør i Python og datascraping i Italien (remote)

Bliv en del af Mindrifts Tendem AI-projekt, hvor du bygger pålidelige pipelines til webscraping og strukturerede data. Rollen fokuserer på dynamiske websites, datavalidering, skalerbar dataudtrækning og automatisering.

Beskrivelse

  • Lede komplette dataudtræksprocesser på komplekse websites og levere omfattende, nøjagtige og pålidelige strukturerede datasæt
  • Bruge tilgængelige platforme og skræddersyede arbejdsgange til at effektivisere indsamling, validering og opgaveløsning efter definerede specifikationer
  • Tilpasse dataudtræksmetoder til JavaScript-renderede sider, interaktive kilder og websites i forandring
  • Opretholde datakvaliteten gennem validering, sammenligning på tværs af kilder, formateringskontroller og struktureret gennemgang før levering
  • Udvide scraping-kapaciteten til store datasæt gennem effektiv batchbehandling og parallel behandling
  • Følge fejl i dataudtræk og bevare den operationelle pålidelighed, når websitestrukturer ændrer sig
  • Anvende ekspertise inden for webscraping, dataudtræk og databehandling i Tendem-projektet
  • Kombinere teknisk dømmekraft med Apify, OpenRouter og andre værktøjer for at udvikle effektive specialløsninger

Krav

  • Der kræves mindst 5 års relevant erfaring med data engineering, webscraping, automatisering eller softwareudvikling
  • En bachelor- eller kandidatgrad inden for ingeniørvidenskab, anvendt matematik, datalogi eller et beslægtet teknisk område er en fordel
  • Avanceret erfaring med Python-scraping ved hjælp af BeautifulSoup, Selenium eller tilsvarende værktøjer, dynamisk indhold og proxybaserede API'er
  • Evne til at hente data fra komplekse kilder som hierarkier, arkiverede sider og uensartet HTML
  • Erfaring med at rense, normalisere og validere data til levering i CSV, JSON eller Google Sheets
  • Praktisk erfaring med at håndtere antibot-beskyttelse og websitestrukturer i forandring i stor skala
  • Kendskab til AWS eller sammenlignelig cloudinfrastruktur samt Docker-baseret containerisering
  • Praktisk erfaring med LangChain, OpenRouter eller lignende LLM-frameworks til automatisering
  • Usædvanligt grundig og stærkt fokuseret på datanøjagtighed
  • Evne til at arbejde selvstændigt, undersøge problemer og løse dem uden tæt supervision
  • Engelsk på øvre mellemniveau (B2) eller højere er påkrævet
  • Et link til en GitHub-profil er en fordel

Fordele

  • freelanceopgave
  • Deltidsarbejde på afstand
  • Forventet arbejdsbelastning på 10–20 timer om ugen i aktive projektperioder

Relaterede job

METALINE

Fullstack Javaudvikler (Spring, Vue.js)

METALINE
501 – 1.000 Medarbejdere
CybersikkerhedLogistikRådgivning

Bliv en del af METALINE som fullstackudvikler med Java/Spring og Vue.js, hvor du bygger e-handelsplatforme, REST API'er og CI/CD-integrationer. METALINE har specialiseret sig i administrerede IT-tjenester, datacentre og IT-tjenester.

Åbn