
人工智慧輔助解決方案總監
帶領人工智慧工具與工作流程的運用,擴大 College Board 的評量內容開發規模。 負責 SAT、AP 及其他計畫中的題目生成、評估、培訓與推廣,職位為美國境內全遠端工作。
說明
- 負責所分配 College Board 評量計畫合作的端到端交付
- 定義問題與需求,設計並建置人工智慧工具、提示詞與工作流程
- 交付由培訓與推廣計畫支援的可用解決方案
- 評估人工智慧生成內容是否存在構念不符、推理錯誤、偏見與事實錯誤
- 為交付給合作團隊的工具提供最終品質核准
- 建立品質標準與評估方法,包括評分規準、基準與評分架構
- 確認系統型解決方案的需求,找出需要更多利害關係人投入與資源支援的部分
- 診斷限制規模化發展的文化、人力配置、流程與技術缺口
- 制定人工智慧賦能題目開發的合作重點與計畫路線圖
- 定義代理式工作流程的標準與輸入
- 參與企業級代理式—人工協作架構、策略與路線圖的建構
- 代表所支援的計畫參與跨計畫工具與方法討論
- 設計並提供人工智慧輔助及代理式工作流程培訓
- 建立支援負責任工具推廣的流程文件
- 建立並記錄影響衡量指標
- 維護 College Board 的評量設計與開發標準
- 測試新興人工智慧工具、模型與技術
- 與團隊及內部實務社群分享研究結果
- 以 College Board 代表身分參加相關外部會議與專業研討會
職位要求
- 至少七年跨多種題型開發標準化評量題目的經驗
- 精通命題實務與構念對齊
- 在閱讀理解、寫作、數學或科學評量方面具備深厚學科專業知識
- 至少三年人工智慧輔助或代理式方法的實務經驗,包括 AIG、RAG、提示詞工程與上下文工程
- 成功透過推廣與可衡量影響推動流程或技術改善
- 具備大型語言模型、幻覺、上下文視窗限制與過時訓練資料的實務知識
- 具備代理式與多代理式工作流程、工具呼叫以及鏈式或編排式提示詞的經驗
- 具備氛圍編程、程式設計或快速原型開發經驗
- 能夠獨立建立可用腳本、工具或互動式原型
- 具備流程設計、教育他人以及促進工具、流程與系統採用的經驗
- 能夠串聯技術與非技術討論
- 具備跨職能協作的成功經驗
- 具備優良的組織與規劃能力
- 具備執行程序、管理專案計畫與時程,以及維護追蹤文件的經驗
- 具備題目與測驗開發生命週期、數位編寫與審查工具,以及內容管理或題庫系統的經驗
- 能自在應對快速步調環境中的模糊性
- 願意每年出差六至八次
- 獲准在美國工作
- 有興趣透過使命導向的工作拓展教育與職涯機會
- 對測試新興技術與人工智慧驅動解決方案抱持好奇並願意嘗試
- 具備清晰、精簡的書面與口頭溝通能力
- 具備學習者心態並致力於持續成長
- 具備強烈的影響力意識與追求卓越的動力
- 具備協作且富有同理心的工作方式
- 強烈偏好具備碩士學位或同等教育與經驗
福利待遇
- 有意義的職涯發展機會
- 支持性的團隊環境
- 旨在支持員工身心健康與成功的完整福利方案
- 公平且具競爭力的薪酬
- 薪資依工作地點調整
- 以市場資料為基礎的透明報價
- 可選擇全遠端工作
- College Board 辦公室附近的候選人可選擇混合辦公,每週二與週三到辦公室辦公
- 參加相關外部專業會議與研討會的出差機會





