Pinterest 是一个视觉灵感发现平台，人们可以在这里寻找灵感、保存创意，并围绕兴趣、项目和购物整理内容。该平台结合个性化推荐与视觉搜索，覆盖家居设计、时尚、食谱和活动等主题，同时通过商业工具和广告帮助创作者与零售商触达受众。
高级资深软件工程师，AI 平台 - 帕洛阿尔托混合办公
负责制定 Pinterest AI 和机器学习评估平台的战略、架构与推广方案。 帮助在全公司范围内建立可靠的生成式 AI 体验评估实践。
描述
- 以技术领导力识别现代化机遇，并扩展全公司评估系统的路线图
- 制定跨职能技术方向，协调合作团队，提高共享评估能力的采用率
- 做出长期架构决策，提升 Pinterest AI 和机器学习评估平台的用户体验与可靠性
- 开发结合自动化指标、专家评审、人工反馈、安全性和业务成果的评估方法与标准
- 领导跨团队复杂项目，管理技术权衡与风险，并交付可衡量的影响
- 推动 Pinterest AI 和机器学习评估平台发展为全公司使用的统一、可靠系统
- 与工程、研究、产品和安全团队合作，提升 AI 驱动体验的质量、发布决策和信心
任职要求
- 至少 3 年亲自设计和运营生成式 AI 及复杂机器学习系统评估体系的经验
- 具备创建基准和黄金数据集、应用自动化指标与人工评估、使用基于模型的评分以及分析失败案例的经验
- 精通 Python
- 了解分布式系统原理
- 能够在编码和系统设计过程中高效使用 AI 工具进行迭代
- 深入了解生成式 AI 和推荐系统评估库与框架，包括 AutoEvals、OpenEvals 和 Ragas
- 至少 5 年开发可扩展平台的经验，涵盖分布式实验、数据与模型版本管理、编排、可观测性、发布管理和生产监控
- 对生成式 AI 的稳健性、偏见、隐私、安全性以及自动化评估信号的局限性等风险具备良好判断力
- 拥有计算机科学、工程或相关专业学士学位，或具备同等经验
福利待遇
- 符合获得股权的资格
- 灵活的 PinFlex 工作模式
- 每季度进行一到两次面对面协作
- 提供平等就业机会的工作环境
- 申请过程中提供医疗或宗教便利支持