Mindrift
Mindrift
501 – 1,000 員工
SaaS人工智慧市集
Mindrift 是一家人工智慧人才市場與 SaaS 平台,將專業貢獻者及領域專家與科技公司的人工智慧訓練和評估專案連結起來。作為 Toloka 的一部分,Mindrift 與作家、編輯、品質保證專家、科學家及其他領域專家合作,協助產生訓練資料、評估模型的安全性與推理能力、評量媒體品質,並建立用於提升人工智慧效能與可靠性的真實情境。Mindrift 透過評估和身分驗證招募並審核貢獻者,接著為他們提供人工智慧訓練與評估領域中彈性且有酬的專案機會。

羅馬尼亞遠端資深 Python 資料抓取工程師

資深 Python 工程師,負責為 Mindrift 的 Tendem AI 專案建立可靠的網頁抓取與資料處理工作流程。此職位著重於從複雜網站擷取、驗證並擴展結構化資料集。

說明

  • 管理跨複雜網站的完整資料擷取工作流程,維持結構化資料集的廣泛涵蓋、準確性與可靠交付。
  • 使用可用工具與客製化工作流程,依照專案要求加快資料收集、驗證與任務執行。
  • 透過適應 JavaScript 渲染內容與不斷變化的網站行為,可靠地從動態互動式網站擷取資料。
  • 透過資料驗證、跨來源一致性檢查、格式控管與系統化交付前驗證,維持資料品質標準。
  • 透過高效批次處理或平行處理擴展大量抓取,調查失敗原因,並在網站結構小幅變動時維持穩定性。
  • 將網頁抓取、資料擷取與資料處理專業應用於 Tendem 專案。

職位要求

  • 具備 5 年以上資料工程、網頁抓取、自動化或軟體開發相關經驗。
  • 具備使用 BeautifulSoup、Selenium 或同類工具進行 Python 進階抓取的經驗,包括 JavaScript、AJAX、無限捲動與基於代理的 API。
  • 能夠從階層結構、封存頁面與不一致 HTML 等複雜結構中擷取資訊。
  • 具備清理、正規化與驗證資料的豐富經驗,能產出 CSV、JSON 與 Google Sheets 等結構化輸出。
  • 具備大規模管理反機器人防護機制與變動網站結構的實務經驗。
  • 具備在正式環境工作流程中使用 AWS 或同等雲端基礎設施及 Docker 容器化的經驗。
  • 具備將 LangChain 或 OpenRouter 等 LLM 框架應用於自動化任務的實務經驗。
  • 極度重視細節,並持續專注於資料準確性。
  • 能夠獨立工作、排查問題並推動任務完成。
  • 英語程度達 B2 或以上的中高級熟練程度。
  • 擁有 GitHub 個人檔案者佳。

福利待遇

  • 自由接案合作。
  • 兼職時程。
  • 可在羅馬尼亞遠端工作。
  • 專案活躍階段每週約 10–20 小時。
  • 薪酬最高相當於每小時 40 美元。

相關職缺