软件工程总监,数据平台
负责 Databricks 平台迁移、AI 辅助工程和企业数据主数据平台集成。 指导离岸团队,推动 S&P Global 的数据平台计划。
描述
- 与 Databricks 核心团队协作,将现有数据管道迁移至目标企业平台
- 制定可重复使用的数据集摄取、转换、测试、部署和监控模式
- 推动采用 Claude、GitHub Copilot 和大型语言模型等 AI 开发工具
- 建立上下文工程实践并构建可重复使用的上下文包
- 协助离岸团队制定并落实适用于各类数据资产、领域和源系统的接入模式
- 为批处理和流处理工作负载创建可重复使用的数据摄取与处理方法
- 将平台管道和数据集连接至企业数据主数据平台
- 落实数据质量检查、数据核对流程和元数据对齐机制
- 推动统一的业务定义、可重复使用的数据概念以及受治理的数据使用
- 担任离岸数据平台工程领域的高级技术权威
- 参与架构决策,并为工程师和合作团队提供建议
- 参与复杂数据平台工作的设计评审和代码评审
任职要求
- 在数据工程、数据平台、云数据架构、软件工程或相关工程领域拥有至少 10 年经验
- 曾担任高级个人贡献者、技术负责人、首席或资深工程师、杰出工程师、架构师或同等职位
- 具备现代数据工程和管道开发的扎实实操能力
- 拥有批处理或流式数据工作流经验
- 具备 Databricks 平台和湖仓架构经验
- 拥有 Claude、GitHub Copilot、大型语言模型或类似工具等 AI 辅助工程工具的实践经验
- 曾将大型语言模型用于代码生成和优化等工程任务
- 外部候选人进入最终面试阶段后,须至少参加一次现场面试
- 熟悉企业数据目录、元数据管理、业务术语表、数据血缘、运营元数据平台或语义数据层
- 拥有 NeoXam DataHub 或类似数据主数据工作流经验
- 理解语义建模
- 展现出通过指导、赋能他人和建立共识实现卓越领导的能力
福利待遇
- 符合年度激励计划的参与资格
- 医疗保健保障
- 丰厚的带薪休假
- 持续学习和职业发展资源
- 退休规划
- 继续教育计划
- 公司配比的学生贷款缴款
- 财务健康计划
- 家庭福利与礼遇
- 零售折扣
- 推荐奖励
