
資深 Python 網頁擷取工程師——塞爾維亞,遠端,兼職
負責為 Mindrift 的 Tendem AI 專案建構可靠網頁擷取與資料處理流程的資深 Python 工程師。此職位專注於從複雜、動態的網站中擷取、驗證並擴展結構化資料集。
說明
- 負責複雜網站的端到端資料擷取流程,交付完整、準確且可靠的結構化資料集。
- 使用可用工具與客製化流程,依據既定要求加快資料收集、驗證與任務完成。
- 從動態及互動式來源可靠地擷取資料,並適應 JavaScript 渲染內容與不斷變化的網站行為。
- 透過驗證檢查、跨來源比對、格式控管及交付前的系統化核驗維持資料品質。
- 透過高效批次或平行處理擴展大量擷取,監控失敗情況,並在網站發生小幅變更時維持穩定性。
- 將網頁擷取、資料提取與資料處理專業知識應用於 Tendem 專案。
- 使用 Apify、OpenRouter 及其他相關技術。
職位要求
- 具備五年以上資料工程、網頁擷取、自動化或軟體開發相關經驗。
- 具備工程、應用數學、電腦科學或相關技術領域學士或碩士學位者佳。
- 具備扎實的 Python 網頁擷取經驗,熟悉 BeautifulSoup、Selenium 或類似工具,包括 JavaScript、AJAX、無限捲動及基於代理伺服器的 API 存取。
- 能夠從階層結構、封存頁面及不一致 HTML 等複雜結構中擷取資訊。
- 具備清理、正規化及驗證資料的實務經驗,能以 CSV、JSON 及 Google Sheets 等結構化格式交付。
- 具備大規模管理反機器人防護機制及因應網站結構變動的實務經驗。
- 具備在正式環境或專案流程中使用 AWS 或同等雲端基礎架構及 Docker 的經驗。
- 具備將 LangChain、OpenRouter 或類似 LLM 框架應用於自動化任務的實務經驗。
- 高度重視細節並致力於確保資料準確性。
- 能夠自主工作並獨立排解問題。
- 要求具備 B2 或以上程度的中高級英語能力。
- 擁有 GitHub 個人檔案者佳。
福利待遇
- 自由工作者合作。
- 兼職遠端工作。
- 專案活躍階段預計每週工作 10–20 小時。