Ang AWISEE ay isang European digital marketing at SEO agency na nakatuon sa international link building, digital PR, at influencer at KOL marketing. Nagbibigay ang team na ganap na remote ng manual outreach at white-label link building para sa mga negosyo at ahensya, gamit ang network ng mga publisher sa Europe, Latin America, APAC, North America, at iba pang rehiyon. Ang iniangkop na SEO nito ay para sa mga kliyente sa mga sektor gaya ng SaaS, eCommerce, iGaming, crypto, at fintech.
Senior na Inhinyero ng Imprastraktura ng Data, Web Scraping
Bumuo ng mga anti-bot scraping cluster at high-throughput na ingestion pipeline para sa social media data lab. Lumikha ng nasusukat na storage at mga sistema ng data na sumusuporta sa AI modeling.
Paglalarawan
- Buuin at panatilihin ang ingestion engine para sa social media data lab.
- Bumuo at magpatakbo ng mga tagong scraping cluster gamit ang residential proxy, TLS fingerprinting, browser farm, at pag-ikot ng session.
- Lumikha ng matatag at nasusukat na scraping pipeline para sa Instagram, TikTok, YouTube, X, at iba pang web source.
- Magdisenyo ng distributed queue at workflow engine para humawak ng milyun-milyong asynchronous scraping task araw-araw.
- Idisenyo ang structured at unstructured storage para sa kasunod na AI modeling.
- Mag-set up ng mga awtomatikong alerto para sa pagbabago sa interface at API ng platform, mga pattern ng pag-block, at pagkabigo ng proxy.
- Maghatid ng milyun-milyong rekord ng profile, post, at video araw-araw habang pinananatili ang halos tuloy-tuloy na availability.
Mga Kinakailangan
- Hindi bababa sa apat na taong karanasan sa web scraping na may mataas na dami, data engineering, o reverse engineering.
- Malawak na karanasan sa pag-bypass ng mga advanced na anti-bot service gaya ng Cloudflare, Akamai, at PerimeterX gamit ang TLS impersonation, browser automation, at pamamahala ng proxy.
- Kasanayan sa Python o Go.
- Malalim na kaalaman sa Playwright, Puppeteer, Scrapy, o Selenium.
- Karanasan sa mga distributed system at task queue gaya ng Temporal, Ray, Kafka, at Redis.
- Mahusay na kasanayan sa SQL.
- Karanasan sa mga makabagong analytical data lake o data warehouse.
- Mas gusto: Karanasan sa pagkuha ng short-form video content at metadata ng user mula sa TikTok, Instagram, at YouTube.
- Mas gusto: Karanasan sa direktang pagpapadala ng mga output ng scraping sa mga vector database at real-time AI processing queue.
Mga Benepisyo
- Kaayusan ng trabahong remote.