Mindrift
Mindrift
501 – 1,000 員工
SaaS人工智慧市集
Mindrift 是一家人工智慧人才市場與 SaaS 平台,將專業貢獻者及領域專家與科技公司的人工智慧訓練和評估專案連結起來。作為 Toloka 的一部分,Mindrift 與作家、編輯、品質保證專家、科學家及其他領域專家合作,協助產生訓練資料、評估模型的安全性與推理能力、評量媒體品質,並建立用於提升人工智慧效能與可靠性的真實情境。Mindrift 透過評估和身分驗證招募並審核貢獻者,接著為他們提供人工智慧訓練與評估領域中彈性且有酬的專案機會。

高級 Python 資料抓取工程師(自由工作者,沙烏地阿拉伯遠端)

高級 Python 工程師,為 Mindrift 的 Tendem AI 專案開發可擴展的資料抓取工作流程。 此職位專注於使用 Python 與自動化工具擷取、驗證及結構化複雜網頁資料。

說明

  • 負責 Mindrift Tendem 專案及其實際應用中的專業資料抓取工作流程
  • 管理複雜網站上的端到端資料擷取管線
  • 產出完整、準確、可靠且結構良好的資料集
  • 應用 Apify、OpenRouter 與自訂工作流程,簡化資料收集、驗證及任務執行
  • 從動態互動式來源擷取資料,並適應 JavaScript 渲染內容與不斷變化的網站行為
  • 透過驗證檢查、跨來源比對、格式控制與系統化核驗維護資料品質
  • 透過高效批次處理與平行處理擴展大規模抓取
  • 調查故障,並在網站結構發生輕微變化時維持管線穩定
  • 獨立解決複雜的腳本編寫、自動化、資料擷取、資料結構化與驗證問題

職位要求

  • 具備 5 年以上資料工程、網頁抓取、自動化或軟體開發相關經驗
  • 英語程度達中高級(B2)或以上
  • 具備進階 Python 抓取經驗,熟悉 BeautifulSoup、Selenium 或同類工具、動態 JavaScript/AJAX 內容、無限捲動及基於代理的 API
  • 能夠從複雜階層、封存頁面與不一致的 HTML 中擷取資訊
  • 深入了解資料清理、正規化與驗證
  • 具備大規模管理反機器人防護機制及不斷變化網站結構的實務經驗
  • 具備 AWS 或同類雲端基礎架構經驗
  • 具備使用 Docker 封裝應用程式的經驗
  • 實際使用過 LangChain、OpenRouter 或類似的 LLM 自動化框架
  • 注重細節並高度重視資料準確性
  • 具備自我驅動能力,並有信心獨立排解問題
  • 工程、應用數學、電腦科學或相關技術學科的學士或碩士學位優先
  • 擁有 GitHub 個人檔案連結優先

福利待遇

  • 彈性的兼職自由工作者合作
  • 專案活躍期間預計每週工作 10–20 小時
  • 薪酬最高相當於每小時 37 美元,視經驗程度與貢獻速度而定
  • 有機會參與創新的人工智慧與科技開發專案
  • 完全遠端工作