合約學生人工智慧驗證與基準測試工程師
評估 AI 智能體的準確度,並建立用於基準測試的資料集。 運用 Python 工具與分析,支援 Zoox 自動駕駛計程車技術。
說明
- 參與 AI 工具的端到端驗證流程。
- 維護測試資料集。
- 執行基準測試流程並分析結果,找出不同智能體版本中的路由錯誤與效能退步。
- 建立並擴充真值資料集,將智能體輸出與經過驗證的答案進行比較。
- 找出基準驗證中的不足,並協助強化評估基礎架構。
- 制定評估指標,包括標籤準確度與結構化輸出的正確性。
- 調查智能體輸出失敗的原因,並與工程師合作找出實際可行的改善方式。
- 建立指令碼與工具,自動化資料收集、結果解析及指標報告。
- 記錄發現、追蹤基準測試趨勢,並與團隊分享結果。
- 與開發自動駕駛技術的工程師及研究人員合作。
職位要求
- 目前就讀於電腦科學、資料科學、工程或相關領域的理學士或理碩士課程。
- 能夠接受至少三個月的工作安排。
- 每週能工作至少 20 小時。
- 能在公司其中一間辦公室現場工作。
- 遵守 Zoox 的保密規定,包括不得在 Zoox 以外將公司專有資訊用於或分享於學術研究、論文、出版品或簡報。
- 熟悉 Cursor 或 Claude。
- 熟悉 Python。
- 了解精確率、召回率、F1 分數及混淆矩陣等評估指標。
- 能夠熟悉處理 CSV 和 JSON 等結構化資料格式。
- 具備撰寫或修改可重現分析指令碼的經驗。
- 曾接觸以大型語言模型為基礎的系統、提示工程或 AI 智能體評估。
- 具備使用 Jira 或 Slack 等工單或訊息工具的經驗。
福利待遇
- 可在學業期間持續從事有意義的工作。
- 有機會學習並培養新技能。
- 獲得專業工作環境中的實務經驗。
- 福利資格由供應商決定。
