电信与银行领域高级技术数据架构师
负责电信或银行领域受治理、可扩展数据平台的端到端架构。运用流处理、湖仓和 OLAP 系统方面的专业知识,打造可靠的数据解决方案。
描述
- 负责端到端数据平台架构,并为数据工程团队制定技术标准
- 设计并交付批处理和实时流式数据架构
- 定义湖仓架构、开放表格式和查询引擎策略
- 设计实时数据服务和 OLAP 解决方案
- 制定 ETL 流水线、模式演进、数据质量、数据血缘和访问控制标准
- 构建可扩展、高性价比的多租户数据平台
- 在自主管理和本地部署基础设施上开展工作
- 与数据工程和技术团队合作,确保架构标准得到有效落实
任职要求
- 至少 7 年数据架构或数据工程经验
- 具备丰富的数据架构和数据仓库实践经验
- 具有构建 ETL 流程的专业经验
- 具备 Apache Spark 实际操作经验
- 具备 Apache Kafka 实际操作经验
- 具备 Apache Airflow 实际操作经验
- 具备湖仓架构设计经验
- 具备扎实的 SQL 技能
- 深入理解批处理和流式数据处理
- 具备开放表格式和查询引擎经验
- 深入了解数据治理、数据血缘、质量管理和访问控制
- 具备面向规模化、高性价比和多租户运营进行设计的经验
- 必须具备电信或银行领域的专业经验
- 具备数据网格或数据产品运营模式经验者优先
- 具备支持共享数据平台多客户部署经验者优先
