Mindrift
Mindrift
501 – 1,000 員工
SaaS人工智慧市集
Mindrift 是一家人工智慧人才市場與 SaaS 平台,將專業貢獻者及領域專家與科技公司的人工智慧訓練和評估專案連結起來。作為 Toloka 的一部分,Mindrift 與作家、編輯、品質保證專家、科學家及其他領域專家合作,協助產生訓練資料、評估模型的安全性與推理能力、評量媒體品質,並建立用於提升人工智慧效能與可靠性的真實情境。Mindrift 透過評估和身分驗證招募並審核貢獻者,接著為他們提供人工智慧訓練與評估領域中彈性且有酬的專案機會。

資深 Python 網頁爬蟲工程師 – 自由接案遠端

為 Mindrift 的 AI 專案建立可靠的 Python 網頁爬蟲與資料處理流程。從複雜且動態的網站擷取、驗證並擴展結構化資料集。

說明

  • 負責複雜網站的端到端資料擷取流程,交付完整、準確且結構化的資料集
  • 使用現有工具與自訂工作流程,加速資料收集、驗證及依既定要求執行任務
  • 針對 JavaScript 渲染內容、互動式來源及不斷變化的網站行為,調整資料擷取方法
  • 透過驗證、跨來源核對、格式控制與系統化檢查,維持資料品質
  • 透過高效批次處理或平行處理,擴展大規模資料集的爬蟲能力
  • 監控擷取失敗情況,並透過應對網站結構的小幅變化維持穩定性
  • 運用網頁爬蟲、資料擷取與資料處理專業知識,使用 Apify、OpenRouter 及相關技術

職位要求

  • 具備 5 年以上資料工程、網頁爬蟲、自動化或軟體開發相關經驗
  • 具備工程、應用數學、電腦科學或相關技術領域的學士或碩士學位者優先
  • 具備扎實的技術基礎,並有腳本撰寫、自動化與資料擷取流程的實務經驗
  • 擁有豐富的 Python 爬蟲經驗,熟悉 BeautifulSoup、Selenium 或類似工具,並了解 JavaScript、AJAX、無限捲動及基於代理伺服器的 API
  • 能夠從複雜階層、封存頁面及不一致的 HTML 結構中擷取資料
  • 具備清理、正規化與驗證 CSV、JSON 或 Google 試算表中結構化資料集的經驗
  • 具備大規模處理反機器人機制及網站結構變化的經驗
  • 具備 AWS 或同等雲端基礎架構及 Docker 容器化的實務經驗
  • 具備將 LangChain、OpenRouter 或類似 LLM 框架應用於自動化任務的實際經驗
  • 高度重視細節,並致力於確保資料準確性
  • 能夠自主工作並獨立排解問題
  • 英語程度達中高級(B2)或以上
  • 提供 GitHub 連結者優先

福利待遇

  • 自由接案合作
  • 兼職遠端工作
  • 專案活躍階段每週約 10–20 小時

相關職缺

New Engen

資深客戶策略師,數位行銷(美國遠端)

New Engen
201 – 500 員工
B2B媒體行銷

支援 New Engen 客戶帳戶,協調行銷活動流程、創意測試、成效分析、報告與交付事項。 此美國遠端職務將與客戶管理及創意團隊合作,確保專案如期推進並提升行銷活動成效。

開啟