資深 Python 網頁抓取工程師——沙烏地阿拉伯遠端
為 Mindrift 的 Tendem AI 專案開發可靠網頁抓取與資料處理流程的資深 Python 工程師。此職位專注於從複雜網站擷取、驗證並擴充結構化資料集。
說明
- 負責跨複雜網站的完整資料擷取流程
- 維持結構化資料集的完整涵蓋、結果準確性與可靠交付
- 運用現有工具和量身打造的流程，加速資料收集、驗證與任務執行
- 持續從動態及互動式網頁來源擷取資料
- 針對 JavaScript 渲染內容與持續變動的網站行為調整擷取方法
- 透過驗證檢查、跨來源比對、格式規則與系統化核驗維護資料品質
- 透過高效批次處理或平行處理擴大大量網頁抓取
- 追蹤失敗情況，並在網站結構出現細微變化時維持流程穩定
- 在網頁擷取與資料處理流程中使用 Apify、OpenRouter 及相關技術
職位要求
- 具備 5 年以上資料工程、網頁抓取、自動化或軟體開發相關經驗
- 具備工程、應用數學、電腦科學或相關技術領域的學士或碩士學位者優先
- 具備進階 Python 網頁抓取經驗，包括 BeautifulSoup、Selenium 或同類工具、動態內容及基於代理的 API
- 能夠從階層結構、封存頁面和不一致 HTML 等複雜結構中擷取資訊
- 具備清理、正規化與驗證資料，並以 CSV、JSON 或 Google Sheets 格式交付的經驗
- 具備大規模處理反機器人系統與變動網站結構的實務經驗
- 具備 AWS 或同類雲端基礎設施經驗
- 具備使用 Docker 封裝應用程式的經驗
- 實際使用 LangChain、OpenRouter 或類似 LLM 框架執行自動化任務
- 注重細節，持續專注於資料準確性
- 能夠獨立工作、自主管理任務並排查問題
- 英語程度達中高級（B2）或以上
- 擁有 GitHub 個人檔案者佳
福利待遇
- 兼職自由工作合作
- 專案活躍階段每週約 10 至 20 小時
- 最高每小時等值 37 美元，依貢獻程度與工作進度而定
- 彈性的專案制工作量，報酬依工作範圍、複雜程度與所需專業能力而異
- 有機會參與技術與人工智慧開發專案
