Az AWISEE egy európai digitális marketing- és SEO-ügynökség, amely a nemzetközi linképítésre, a digitális PR-ra, valamint az influencer- és KOL-marketingre összpontosít. A teljesen távmunkában dolgozó csapat személyre szabott megkereséseket és white label linképítést kínál vállalkozásoknak és ügynökségeknek, Európát, Latin-Amerikát, az APAC-régiót, Észak-Amerikát és más térségeket lefedő kiadói hálózatára támaszkodva. Testre szabott SEO-szolgáltatásai többek között SaaS-, e-kereskedelmi, iGaming-, kripto- és fintechszektorok ügyfeleit szolgálják ki.
Vezető adat-infrastruktúra mérnök, webes adatgyűjtés
Építsen botvédelmet megkerülő adatgyűjtő klasztereket és nagy áteresztőképességű adatbetöltési folyamatokat egy közösségimédia-adatlabor számára. Fejlesszen skálázható tárolási és adatrendszereket, amelyek támogatják a mesterséges intelligencia modellezését.
Leírás
- Fejlessze és tartsa karban a közösségimédia-adatlabor adatbetöltő motorját.
- Építsen és üzemeltessen rejtett adatgyűjtő klasztereket lakossági proxykkal, TLS-ujjlenyomat-hamisítással, böngészőfarmokkal és munkamenet-rotációval.
- Hozzon létre ellenálló, skálázható adatgyűjtési folyamatokat az Instagram, a TikTok, a YouTube, az X és más webes források számára.
- Tervezzen elosztott sorokat és munkafolyamat-motorokat, amelyek naponta több millió aszinkron adatgyűjtési feladatot kezelnek.
- Tervezze meg a strukturált és strukturálatlan adattárolást a további mesterségesintelligencia-modellezéshez.
- Állítson be automatikus riasztásokat a platformfelületek és API-k változásai, a blokkolási minták és a proxyhibák jelzésére.
- Biztosítson naponta több millió profil-, bejegyzés- és videórekordot közel folyamatos rendelkezésre állás mellett.
Követelmények
- Legalább négy év tapasztalat nagy volumenű webes adatgyűjtésben, adatmérnöki munkában vagy visszafejtésben.
- Jelentős tapasztalat olyan fejlett botvédelmi szolgáltatások megkerülésében, mint a Cloudflare, az Akamai és a PerimeterX, TLS-utánzással, böngészőautomatizálással és proxykezeléssel.
- Python vagy Go ismerete.
- A Playwright, Puppeteer, Scrapy vagy Selenium alapos ismerete.
- Tapasztalat elosztott rendszerekkel és olyan feladatsorokkal, mint a Temporal, a Ray, a Kafka és a Redis.
- Magabiztos SQL-ismeretek.
- Tapasztalat modern analitikai adattavakkal vagy adattárházakkal.
- Előnyt jelent: rövid videós tartalmak és felhasználói metaadatok kinyerésében szerzett tapasztalat a TikTokról, az Instagramról és a YouTube-ról.
- Előnyt jelent: adatgyűjtési eredmények közvetlen továbbítása vektoradatbázisokba és valós idejű MI-feldolgozási sorokba.
Juttatások
- Távoli munkavégzés.