Mindrift
Mindrift
501 – 1,000 員工
SaaS人工智慧市集
Mindrift 是一家人工智慧人才市場與 SaaS 平台,將專業貢獻者及領域專家與科技公司的人工智慧訓練和評估專案連結起來。作為 Toloka 的一部分,Mindrift 與作家、編輯、品質保證專家、科學家及其他領域專家合作,協助產生訓練資料、評估模型的安全性與推理能力、評量媒體品質,並建立用於提升人工智慧效能與可靠性的真實情境。Mindrift 透過評估和身分驗證招募並審核貢獻者,接著為他們提供人工智慧訓練與評估領域中彈性且有酬的專案機會。

資深 Python 資料擷取工程師——羅馬尼亞遠端自由工作者

Mindrift 正在尋找一名資深 Python 工程師,為 AI 專案建立可靠的資料擷取與提取工作流程。 此職位專注於將動態網站轉換為準確、經過驗證的結構化資料集。

說明

  • 管理複雜網站上的完整資料提取工作流程
  • 交付全面、準確且可靠的結構化資料集
  • 使用現有工具和客製化工作流程,加快資料收集、驗證和任務完成
  • 可靠擷取動態和互動式網站,適應 JavaScript 渲染內容及不斷變化的網站行為
  • 透過資料驗證、跨來源核查、格式要求和系統化審查維持資料品質
  • 透過高效批次處理或平行處理擴展大規模資料擷取
  • 追蹤提取失敗情況,並透過應對網站結構的小幅變化維持工作流程穩定
  • 在網頁提取和資料處理工作流程中使用 Apify、OpenRouter 及相關技術

職位要求

  • 至少需要 5 年資料工程、網頁擷取、自動化或軟體開發相關經驗
  • 具備工程、應用數學、電腦科學或相關技術領域的學士或碩士學位者優先
  • 具備紮實的技術基礎,並擁有腳本撰寫、自動化和資料提取工作流程的實務經驗
  • 具備進階 Python 擷取經驗,熟悉 BeautifulSoup、Selenium 或同類工具、JavaScript/AJAX 內容、無限捲動和基於代理的 API
  • 能夠從複雜來源提取資訊,包括階層結構、存檔頁面和不一致的 HTML
  • 具備出色的資料清理、正規化和驗證能力,並有產生 CSV、JSON 或 Google Sheets 資料集的經驗
  • 擁有大規模處理反機器人系統和不斷變化網站結構的實務經驗
  • 具備 AWS 或同類雲端基礎架構以及 Docker 容器化實務經驗
  • 實際使用過 LangChain、OpenRouter 或類似的 LLM 框架進行自動化工作
  • 注重細節和資料準確性
  • 能夠獨立工作、調查問題並在無需密切監督的情況下解決問題
  • 要求具備中高級英語能力(B2)或更高程度

福利待遇

  • 自由工作合作方式
  • 專案活躍期間每週約 10 至 20 小時的兼職工作量
  • 遠端工作安排
  • 時薪最高相當於 40 美元,具體取決於經驗程度和貢獻速度