数据工程师 II,Disney 流媒体推荐
构建 Disney 流媒体推荐所需的核心数据集、机器学习特征和数据管道。 通过可扩展且可靠的数据系统,提升观众的个性化体验。
描述
- 创建并维护机器学习模型和订阅用户体验所需的基础数据集
- 调查、分析并验证各种上游数据源和原始信号
- 为推荐系统开发用户和内容特征
- 通过实验、分析和迭代开发提升现有特征的质量
- 构建、优化并维护大规模数据处理作业、管道和工作负载
- 通过检查、异常检测、测试、监控和告警增强数据质量与可靠性
- 采用可观测性实践,并参与值班轮换,以支持关键生产数据管道
- 与机器学习、数据和软件工程师、项目经理及产品经理协作
任职要求
- 计算机科学或相关领域的学士学位,或同等工作经验
- 至少 3 年处理大规模数据工作负载、整理数据集以及开发数据管道和处理作业的经验
- 具备扎实的 Python、Java 或同类面向对象编程技能
- 具备 Databricks 或同类大规模数据处理平台的使用经验
- 了解 AWS、Microsoft Azure 或 Google Cloud 等公有云服务
- 具备使用源代码管理系统和 CI/CD 管道的经验
- 扎实掌握计算机科学基础知识,包括数据结构、算法和设计模式
- 具备良好的书面和口头沟通能力
- 优先条件:熟练使用 Databricks 构建数据管道
- 优先条件:具备 Apache Spark 等分布式数据处理框架的使用经验
- 优先条件:了解 Kafka、Kinesis 或 SQS 等消息技术
- 优先条件:熟悉推荐系统架构和行业最佳实践
- 优先条件:具备 DynamoDB、Cassandra 或 ScyllaDB 等 NoSQL 数据存储的实操经验
- 优先条件:具备使用 AI 和编程助手加速设计与开发的实操经验
福利待遇
- 医疗、财务和/或其他福利
- 薪酬方案可能包含奖金和/或长期激励单位









