Mindrift
Mindrift
501 – 1,000 員工
SaaS人工智慧市集
Mindrift 是一家人工智慧人才市場與 SaaS 平台,將專業貢獻者及領域專家與科技公司的人工智慧訓練和評估專案連結起來。作為 Toloka 的一部分,Mindrift 與作家、編輯、品質保證專家、科學家及其他領域專家合作,協助產生訓練資料、評估模型的安全性與推理能力、評量媒體品質,並建立用於提升人工智慧效能與可靠性的真實情境。Mindrift 透過評估和身分驗證招募並審核貢獻者,接著為他們提供人工智慧訓練與評估領域中彈性且有酬的專案機會。

資深 Python 資料抓取工程師(自由接案/遠端)

為 Mindrift 的 AI 專案建置並運作可擴展的 Python 抓取工作流程。 從複雜的動態網站擷取、驗證及處理結構化資料。

說明

  • 負責 Tendem 專案及實際應用中的專業抓取工作流程
  • 管理複雜網站的端到端資料擷取
  • 交付完整、準確且可靠的結構化資料集
  • 運用現有工具與客製化工作流程,加快資料蒐集、驗證及任務執行
  • 抓取動態及互動式來源,適應 JavaScript 渲染內容與不斷變化的網站行為
  • 透過驗證、跨來源核對、格式標準及系統化審查維持資料品質
  • 透過高效批次處理或平行處理擴展大規模抓取
  • 監控錯誤,並透過因應網站結構的細微變化維持穩定性
  • 結合技術專長與量身打造的解決方案,使用 Apify、OpenRouter 及相關技術

職位要求

  • 必須具備至少五年資料工程、網路抓取、自動化或軟體開發相關經驗
  • 具備工程、應用數學、電腦科學或相關技術領域學士或碩士學位者優先
  • 具備扎實的腳本撰寫、自動化及資料擷取工作流程實務基礎
  • 擁有豐富的 Python 抓取經驗,熟悉 BeautifulSoup、Selenium 或同類工具、JavaScript 與 AJAX 內容、無限捲動及代理 API
  • 能夠從階層結構、封存頁面及不一致 HTML 等複雜結構中擷取資訊
  • 具備清理、正規化及驗證資料,並以結構化 CSV、JSON 或 Google Sheets 交付的經驗
  • 具備大規模處理反機器人措施及不斷變化網站結構的實務經驗
  • 具備 AWS 或同等雲端基礎架構及以 Docker 為基礎的容器化實務經驗
  • 具備將 LangChain、OpenRouter 或類似 LLM 框架應用於自動化任務的經驗
  • 高度注重細節,重視資料準確性
  • 能夠獨立工作並有效排解問題
  • 擁有 GitHub 個人檔案者優先
  • 必須具備 B2 或更高程度的中高級英語能力

福利待遇

  • 自由接案合作
  • 遠端兼職安排
  • 專案活躍期間每週約 10 至 20 小時
  • 有機會透過 Mindrift 平台參與創新科技專案