AWISEE
AWISEE
11 – 50 Medarbejdere
E-handelMarkedsføringSaaS
AWISEE er et europæisk bureau inden for digital markedsføring og SEO med fokus på international linkbuilding, digital PR samt influencer- og KOL-markedsføring. Det fuldt fjernbaserede team udfører manuel opsøgende kontakt og white label-linkbuilding for virksomheder og bureauer med støtte fra et udgivernetværk, der dækker Europa, Latinamerika, APAC, Nordamerika og andre regioner. Bureauets skræddersyede SEO-arbejde henvender sig til kunder inden for blandt andet SaaS, e-handel, iGaming, krypto og fintech.

Senior dataingeniør inden for datainfrastruktur og web scraping

Byg scrapingklynger med botbeskyttelse og dataindlæsningspipelines med høj kapacitet til et socialmediedatalaboratorium. Udvikl skalerbare lager- og datasystemer, der understøtter AI-modellering.

Beskrivelse

  • Udvikl og vedligehold dataindlæsningsmotoren til socialmediedatalaboratoriet.
  • Byg og driv diskrete scrapingklynger med boligproxyer, TLS-fingeraftryk, browserparker og sessionsrotation.
  • Skab robuste, skalerbare scrapingpipelines til Instagram, TikTok, YouTube, X og andre webkilder.
  • Design distribuerede køer og workflowmotorer, der håndterer millioner af asynkrone scrapingopgaver hver dag.
  • Arkitektér struktureret og ustruktureret lagring til efterfølgende AI-modellering.
  • Opsæt automatiske alarmer ved ændringer i platformenes grænseflader og API'er, blokeringsmønstre og proxyfejl.
  • Lever millioner af profil-, opslag- og videoposter dagligt med næsten uafbrudt tilgængelighed.

Krav

  • Mindst fire års erfaring med web scraping i stor skala, datateknik eller reverse engineering.
  • Solid erfaring med at omgå avancerede antibottjenester som Cloudflare, Akamai og PerimeterX ved hjælp af TLS-impersonering, browserautomatisering og proxyadministration.
  • Gode færdigheder i Python eller Go.
  • Indgående kendskab til Playwright, Puppeteer, Scrapy eller Selenium.
  • Erfaring med distribuerede systemer og opgavekøer som Temporal, Ray, Kafka og Redis.
  • Stærke SQL-færdigheder.
  • Erfaring med moderne analytiske datasøer eller datalagre.
  • En fordel: Erfaring med at udtrække kortvideoindhold og brugermetadata fra TikTok, Instagram og YouTube.
  • En fordel: Erfaring med at sende scrapingresultater direkte til vektordatabaser og køer til AI-behandling i realtid.

Fordele

  • Mulighed for at arbejde på afstand.

Relaterede job