資深首席軟體工程師,AI 平台 - 帕羅奧圖混合辦公
負責制定 Pinterest AI 與機器學習評估平台的策略、架構與推廣方案。 協助在全公司範圍內建立可靠的生成式 AI 體驗評估實務。
說明
- 以技術領導力辨識現代化機會,並擴展全公司評估系統的路線圖
- 制定跨職能技術方向,協調合作團隊,提高共用評估能力的採用率
- 做出長期架構決策,提升 Pinterest AI 與機器學習評估平台的使用者體驗與可靠性
- 開發結合自動化指標、專家審查、人類回饋、安全性與業務成果的評估方法與標準
- 領導跨團隊複雜計畫,管理技術取捨與風險,並交付可衡量的影響
- 推動 Pinterest AI 與機器學習評估平台發展為全公司使用的統一、可靠系統
- 與工程、研究、產品和安全團隊合作,提升 AI 驅動體驗的品質、發布決策與信心
職位要求
- 至少 3 年親自設計和營運生成式 AI 及複雜機器學習系統評估體系的經驗
- 具備建立基準和黃金資料集、應用自動化指標與人工評估、使用基於模型的評分以及分析失敗案例的經驗
- 精通 Python
- 了解分散式系統原理
- 能夠在編碼和系統設計過程中有效使用 AI 工具進行迭代
- 深入了解生成式 AI 和推薦系統評估函式庫與框架,包括 AutoEvals、OpenEvals 和 Ragas
- 至少 5 年開發可擴展平台的經驗,涵蓋分散式實驗、資料與模型版本管理、編排、可觀測性、發布管理和正式環境監控
- 對生成式 AI 的穩健性、偏見、隱私、安全性以及自動化評估訊號的限制等風險具備良好判斷力
- 擁有電腦科學、工程或相關領域學士學位,或具備同等經驗
福利待遇
- 符合獲得股權的資格
- 靈活的 PinFlex 工作模式
- 每季進行一至兩次面對面協作
- 提供平等就業機會的工作環境
- 申請過程中提供醫療或宗教便利支援
