高級 Python 資料抓取工程師——菲律賓遠端職位
Mindrift 正在尋找一名高級 Python 工程師,為 AI 專案建立可靠的資料抓取流程。 此職位專注於從複雜、動態的網站中擷取、驗證並擴展結構化資料。
說明
- 管理複雜網站上的完整資料擷取流程
- 產出完整、準確且可靠的結構化資料集
- 運用工具和客製化流程,加快資料收集、驗證和任務交付
- 從動態及互動式來源收集資訊,包括由 JavaScript 呈現的頁面
- 隨著網站行為和結構變化調整抓取方法
- 透過資料驗證、跨來源核對、格式規則和系統化審查維護資料品質
- 透過高效批次處理和並行處理擴展大量資料抓取
- 追蹤擷取失敗情況,並透過應對網站細微變化維持工作流程穩定性
職位要求
- 具備至少五年資料工程、網頁抓取、自動化或軟體開發相關經驗
- 具備工程、應用數學、電腦科學或相關技術領域學士或碩士學位者優先
- 具備扎實的 Python 抓取經驗,熟悉 BeautifulSoup、Selenium 或同類工具、動態內容及代理 API
- 能夠從階層結構、存檔頁面和不一致 HTML 等複雜來源擷取資訊
- 能夠清理、標準化並驗證資料,並以 CSV、JSON 或 Google Sheets 格式交付
- 能夠在大規模抓取專案中處理反機器人防護措施和不斷變化的網站結構
- 使用 AWS 或同類雲端基礎設施以及以 Docker 為基礎的容器化技術
- 將 LangChain、OpenRouter 或類似的大型語言模型框架應用於自動化流程
- 工作時極度注重細節,並持續專注於資料準確性
- 能夠獨立工作,診斷並解決技術問題
- 英語達到中高級(B2)或更高程度
福利待遇
- 自由工作者專案合作
- 兼職遠端工作安排
- 專案進行期間每週約 10 至 20 小時
- 薪酬最高相當於每小時 30 美元,實際金額取決於經驗程度和貢獻進度
