Mindrift
Mindrift
501 – 1,000 員工
SaaS人工智慧市集
Mindrift 是一家人工智慧人才市場與 SaaS 平台,將專業貢獻者及領域專家與科技公司的人工智慧訓練和評估專案連結起來。作為 Toloka 的一部分,Mindrift 與作家、編輯、品質保證專家、科學家及其他領域專家合作,協助產生訓練資料、評估模型的安全性與推理能力、評量媒體品質,並建立用於提升人工智慧效能與可靠性的真實情境。Mindrift 透過評估和身分驗證招募並審核貢獻者,接著為他們提供人工智慧訓練與評估領域中彈性且有酬的專案機會。

墨西哥資深 Python 資料抓取工程師(遠端)

為 Mindrift 的 AI 平台建置並擴展可靠的網頁抓取工作流程。 從複雜且動態的網站提取、驗證並交付結構化資料。

說明

  • 管理複雜網站上的端到端資料提取工作流程,交付完整、準確且可靠的結構化資料集。
  • 使用可用工具和客製化工作流程,依據既定要求加速資料收集、驗證和任務執行。
  • 透過適應 JavaScript 渲染內容和持續變動的網站行為,可靠地從動態及互動式來源提取資料。
  • 透過驗證檢查、跨來源一致性審查、格式要求和系統化交付前核驗維持資料品質。
  • 透過高效批次處理和並行處理擴展大量抓取能力。
  • 追蹤提取失敗情況,並在網站結構發生輕微變化時維持營運穩定性。
  • 與 Tendem Agents 合作,在 Mindrift 的混合 AI 與人工營運模式中執行重複性任務。
  • 結合技術專長與客製化方法,使用 Apify、OpenRouter 及其他技術工具。
  • 運用網頁抓取、資料提取和資料處理專業知識,產出準確、可靠且高品質的成果。

職位要求

  • 至少需要五年資料工程、網頁抓取、自動化或軟體開發相關經驗。
  • 具備工程、應用數學、電腦科學或相關技術領域的學士或碩士學位者優先。
  • 具備使用 BeautifulSoup、Selenium 或同類工具進行 Python 抓取的豐富經驗,包括處理 JavaScript、AJAX、無限捲動和代理 API。
  • 能夠從階層結構、存檔頁面和不一致的 HTML 等複雜結構中提取資訊。
  • 具備清理、正規化和驗證資料的實務經驗,能以 CSV、JSON 或 Google Sheets 格式交付結構化資料。
  • 具備大規模處理反機器人措施和不斷變動網站結構的經驗。
  • 具備在正式生產工作流程中使用 AWS 或同類雲端基礎設施及 Docker 的實務經驗。
  • 具備將 LangChain 或 OpenRouter 等 LLM 框架應用於自動化任務的經驗。
  • 具備出色的細節關注力,並始終重視資料準確性。
  • 能夠獨立工作、調查問題並有效排除故障。
  • 要求具備 B2 或以上程度的中高級英語能力。
  • 擁有 GitHub 個人檔案連結者優先。

福利待遇

  • 自由接案合作。
  • 兼職遠端工作。
  • 在專案活躍階段,每週預計工作 10 至 20 小時。

相關職缺