
AWS数据工程负责人
负责 CV-Library AWS 数据平台的战略与交付,构建可靠的数据管道和受治理的数据产品,支持招聘市场业务。 制定工程标准,提升平台质量与可靠性,并指导数据工程师团队。
描述
- 制定 AWS 数据平台和数据工程职能的技术方向
- 领导可扩展、可靠且具成本效益的数据解决方案交付
- 构建并改进批处理和实时数据管道,支持业务增长
- 维护并演进数据架构,满足规模、性能和可维护性要求
- 通过代码审查和架构治理推动工程标准
- 创建用于报告、分析、产品洞察和机器学习的数据模型与数据集
- 提升数据质量、可观测性、监控能力和平台可靠性
- 在整个数据平台扩展基础设施即代码、CI/CD 和自动化
- 与分析师、数据科学家及业务相关方合作,根据数据需求交付解决方案
- 评估并实施相关技术,包括 AWS AI 服务,以增强平台能力
- 领导事件响应、根因分析和持续改进
- 指导和培养数据工程师,推动技术卓越、责任担当与协作
任职要求
- 丰富的数据工程专业经验,包括领导或指导工程师的经验
- 具备云数据平台设计和构建经验,优先考虑 AWS
- 扎实的 SQL 技能和分析型数据建模经验
- 具备在生产环境中使用 dbt 的实操经验
- 具备构建和运维生产级数据管道的经验
- 扎实的 Python 开发技能
- 具备使用 Amazon Redshift 等数据仓库的经验
- 具备使用 Apache Airflow 等编排工具的经验
- 具备基础设施即代码经验,优先考虑 Terraform
- 了解 CI/CD 和现代软件工程实践
- 具备批处理数据以及事件驱动或流式数据经验
- 深入理解数据质量、监控、可观测性和运维可靠性
- 能够向技术和非技术受众清晰讲解复杂技术主题
- 具备务实的工程判断力,能合理决定何时构建、改进或保持方案简单
相关职位

