資深 Python 資料擷取工程師(自由接案,希臘遠端)
為 Mindrift 的 AI 科技專案建置並擴展可靠的 Python 擷取工作流程。 從複雜的動態網站擷取、驗證並交付結構化資料集。
說明
- 管理複雜網站上的端到端資料擷取工作流程
- 交付完整、準確且可靠的結構化資料集
- 運用工具與自訂工作流程,加速資料收集、驗證與任務執行
- 從動態及互動式來源收集資料,包括 JavaScript 渲染頁面
- 隨網站行為變化調整擷取方法
- 透過驗證、跨來源檢查、格式標準與系統化核驗維持資料品質
- 透過高效批次處理或平行處理擴展大型資料集擷取
- 監控擷取失敗情況,並在網站結構小幅變更時維持穩定性
職位要求
- 具備 5 年以上資料工程、網頁擷取、自動化或軟體開發相關經驗
- 具備進階 Python 網頁擷取經驗,熟悉 BeautifulSoup、Selenium 或同類工具、動態內容及基於代理的 API
- 能夠從複雜結構中擷取資訊,包括階層結構、封存頁面及不一致的 HTML
- 具備清理、正規化與驗證資料的經驗,能以 CSV、JSON 及 Google Sheets 格式交付結構化資料
- 具備大規模處理反機器人系統及網站結構變化的經驗
- 具備 AWS 或同等雲端基礎架構及 Docker 容器化經驗
- 具備將 LangChain 或 OpenRouter 等 LLM 框架應用於自動化任務的實務經驗
- 對資料準確性一絲不苟
- 具備獨立自主的問題排查能力
- 英語中高級程度(B2)或以上
- 工程、應用數學、電腦科學或相關技術領域的學士或碩士學位尤佳
- 擁有 GitHub 個人檔案尤佳
福利待遇
- 遠端工作
- 專案活躍階段每週兼職約 10–20 小時
- 自由接案合作
- 透過 Mindrift 平台參與創新科技專案
