Adthena phát triển phần mềm phân tích thông tin tìm kiếm và bảo vệ thương hiệu ứng dụng trí tuệ nhân tạo dành cho doanh nghiệp. Nền tảng SaaS của công ty giúp các tổ chức nắm bắt xu hướng thị trường, đánh giá đối thủ cạnh tranh, tối ưu hóa các chiến dịch PPC và nâng cao hiệu quả đầu tư vào Google Ads. Kết hợp công nghệ được cấp bằng sáng chế với chuyên môn về tìm kiếm trả phí, Adthena hỗ trợ các quyết định quảng cáo dựa trên dữ liệu trong những lĩnh vực như ô tô, tài chính và bán lẻ, phục vụ các thương hiệu cùng đại lý trên toàn cầu.
Kỹ sư cấp cao về chống bot và thu thập dữ liệu — Adthena (Làm việc từ xa, Vương quốc Anh)
Xây dựng và vận hành các hệ thống thu thập dữ liệu Python bền bỉ cho nền tảng thông tin tìm kiếm có trả phí của Adthena. Giải quyết các thách thức liên quan đến cơ chế phòng chống bot của Google, trang động và việc thu thập dữ liệu quy mô lớn đáng tin cậy.
Mô tả
- Thiết kế và vận hành các hệ thống thu thập dữ liệu Python quy mô lớn cho Google và các website được bảo vệ nghiêm ngặt khác
- Phát triển trình thu thập dữ liệu cho các trang động chạy bằng JavaScript bằng tự động hóa trình duyệt và các kỹ thuật kết hợp
- Điều chỉnh hệ thống thu thập dữ liệu để thích ứng với những thay đổi trong cấu trúc trang, luồng yêu cầu và các biện pháp kiểm soát tự động hóa
- Xây dựng các pipeline trích xuất đáng tin cậy, tập trung vào độ chính xác, tính nhất quán và khả năng quan sát dữ liệu
- Áp dụng proxy, kỹ thuật tạo dấu vân tay và phương pháp định tuyến yêu cầu để cải thiện độ ổn định và thông lượng
- Theo dõi tình trạng hoạt động của hệ thống thu thập dữ liệu, nhanh chóng xác định lỗi và khắc phục sự cố trong môi trường production
- Cải thiện hiệu năng, hiệu quả chi phí và độ trễ của hạ tầng thu thập dữ liệu
- Phối hợp với các nhóm kỹ thuật dữ liệu, khoa học dữ liệu và sản phẩm để cung cấp dữ liệu thu thập đáng tin cậy, hữu ích
- Duy trì tài liệu rõ ràng về logic thu thập dữ liệu và quy trình vận hành
- Báo cáo cho Trưởng bộ phận Kỹ thuật
Yêu cầu
- Có kinh nghiệm chuyên môn với Python hoặc một ngôn ngữ chính khác như Go, Rust hoặc JavaScript, bao gồm các hệ thống thu thập dữ liệu production
- Có nhiều kinh nghiệm thực tế trong việc thu thập dữ liệu từ Google hoặc các nền tảng được bảo vệ tương đương
- Am hiểu sâu về HTTP, TLS, cookie, header, chuyển hướng và mạng trình duyệt
- Có kinh nghiệm sử dụng Playwright, Selenium, Puppeteer hoặc một framework tự động hóa trình duyệt tương đương
- Hiểu biết nâng cao về phân tích HTML, duyệt DOM và trích xuất dữ liệu
- Có kinh nghiệm quản lý giới hạn tần suất, CAPTCHA, xoay vòng IP và các hệ thống phát hiện bot
- Thoải mái làm việc với các kiến trúc thu thập dữ liệu bất đồng bộ và đồng thời
- Có kinh nghiệm vận hành hệ thống thu thập dữ liệu ở quy mô lớn trong môi trường đám mây
- Có khả năng gỡ lỗi tốt và phương pháp tiếp cận có hệ thống đối với các dạng lỗi phức tạp
- Có kinh nghiệm với kỹ thuật tạo dấu vân tay của trình duyệt không giao diện và các phương pháp né tránh hệ thống chống bot
- Quen thuộc với Docker và Kubernetes
- Có kinh nghiệm với các hệ thống xử lý tác vụ phân tán và hàng đợi công việc
- Có nền tảng về giám sát chất lượng dữ liệu và phát hiện bất thường
- Có kinh nghiệm làm việc với dữ liệu tìm kiếm, quảng cáo hoặc thông tin cạnh tranh
- Có khả năng giải thích rõ ràng các hành vi kỹ thuật phức tạp cho đối tượng không chuyên về kỹ thuật
- Được yêu cầu có quyền làm việc tại Vương quốc Anh trong biểu mẫu ứng tuyển
Phúc lợi
- Quyền chọn mua cổ phiếu
- Chính sách nghỉ phép dựa trên sự tin tưởng
- Môi trường làm việc ưu tiên từ xa
- Hình thức làm việc linh hoạt
- Phát triển nghề nghiệp và đào tạo phù hợp thông qua các kế hoạch Sherpa
- Ngày hack hàng tháng và các ngày đào tạo chuyên biệt
- Tối đa sáu tháng nghỉ thai sản hưởng nguyên lương
- Hai tháng nghỉ thai sản dành cho cha
- Trợ cấp 200 USD cho văn phòng tại nhà
- Tín dụng chào mừng 70 USD để mua hàng hóa công ty
- Nghỉ một ngày vào sinh nhật
- Tiệc mùa hè và tiệc Giáng sinh
- Các buổi gặp mặt trực tiếp thường niên và hàng quý
- Gặp mặt hàng tháng
- Thời gian tình nguyện có hưởng lương mỗi quý
- Văn hóa kỹ thuật theo phong cách startup