
墨西哥資深 Python 資料抓取工程師(遠端)
為 Mindrift 的 AI 平台建置並擴展可靠的網頁抓取工作流程。 從複雜且動態的網站提取、驗證並交付結構化資料。
說明
- 管理複雜網站上的端到端資料提取工作流程,交付完整、準確且可靠的結構化資料集。
- 使用可用工具和客製化工作流程,依據既定要求加速資料收集、驗證和任務執行。
- 透過適應 JavaScript 渲染內容和持續變動的網站行為,可靠地從動態及互動式來源提取資料。
- 透過驗證檢查、跨來源一致性審查、格式要求和系統化交付前核驗維持資料品質。
- 透過高效批次處理和並行處理擴展大量抓取能力。
- 追蹤提取失敗情況,並在網站結構發生輕微變化時維持營運穩定性。
- 與 Tendem Agents 合作,在 Mindrift 的混合 AI 與人工營運模式中執行重複性任務。
- 結合技術專長與客製化方法,使用 Apify、OpenRouter 及其他技術工具。
- 運用網頁抓取、資料提取和資料處理專業知識,產出準確、可靠且高品質的成果。
職位要求
- 至少需要五年資料工程、網頁抓取、自動化或軟體開發相關經驗。
- 具備工程、應用數學、電腦科學或相關技術領域的學士或碩士學位者優先。
- 具備使用 BeautifulSoup、Selenium 或同類工具進行 Python 抓取的豐富經驗,包括處理 JavaScript、AJAX、無限捲動和代理 API。
- 能夠從階層結構、存檔頁面和不一致的 HTML 等複雜結構中提取資訊。
- 具備清理、正規化和驗證資料的實務經驗,能以 CSV、JSON 或 Google Sheets 格式交付結構化資料。
- 具備大規模處理反機器人措施和不斷變動網站結構的經驗。
- 具備在正式生產工作流程中使用 AWS 或同類雲端基礎設施及 Docker 的實務經驗。
- 具備將 LangChain 或 OpenRouter 等 LLM 框架應用於自動化任務的經驗。
- 具備出色的細節關注力,並始終重視資料準確性。
- 能夠獨立工作、調查問題並有效排除故障。
- 要求具備 B2 或以上程度的中高級英語能力。
- 擁有 GitHub 個人檔案連結者優先。
福利待遇
- 自由接案合作。
- 兼職遠端工作。
- 在專案活躍階段,每週預計工作 10 至 20 小時。





