高级企业数据架构师
设计 Aztec Group 的 Databricks Lakehouse 和 Azure 数据平台,制定企业架构、主数据管理及治理标准。 为外包服务构建安全、适用于 AI 的数据基础。
描述
- 向企业架构负责人汇报。
- 通过 Databricks 支持 Aztec 的技术战略。
- 为 Azure 数据平台设计、实施和维护数据模型与架构。
- 制定并维护企业数据架构,包括目标状态设计、路线图、标准和模式。
- 负责 Databricks Lakehouse 架构,包括工作区设计、Unity Catalog 结构、奖章式架构和环境策略。
- 设计并治理与外部客户及第三方之间安全、可扩展的数据共享集成。
- 主导主数据管理的设计与采用,涵盖实体定义、黄金记录、匹配与合并规则以及数据管家流程。
- 制定 Databricks 性能和成本优化标准与实践。
- 为分析和运营领域制定数据建模标准。
- 将数据质量、数据沿袭、编目、分类和访问控制策略纳入平台设计。
- 确保架构符合安全、隐私和监管要求,包括 GDPR 和数据驻留要求。
- 审查解决方案设计,提供架构保障,并通过设计评审委员会和同行评审支持工程团队。
- 设计支持机器学习、生成式 AI 和智能代理应用场景的数据架构。
- 与 AI 和 ML 团队合作开展特征工程、模型数据管道、向量搜索,以及为 AI 系统安全访问企业数据等工作。
- 评估新兴技术,并建议自行构建、购买或采用。
任职要求
- 熟练掌握 Databricks,包括 Unity Catalog、Delta Lake、工作流和平台管理相关概念。
- 具备 Databricks Delta Sharing 的实践经验,以及外部数据共享的安全集成设计经验,包括相关合同考量。
- 拥有设计和实施主数据管理解决方案的出色业绩,包括工具选择、数据管家模式和参考数据管理。
- 具备大规模优化 Databricks 性能和成本的专业能力。
- 具备扎实的数据建模技能,熟悉维度建模、第三范式(3NF)、Data Vault 或类似方法,并有定义企业数据模型的经验。
- 扎实了解与数据平台相关的 Azure 存储、网络和身份概念。
- 具备数据治理框架和工具方面的经验,例如 Microsoft Purview、数据质量管理、元数据和数据沿袭工具。
- 精通 SQL,并掌握 Python 和/或 Spark 的实际应用知识。
- 了解数据安全与隐私,包括加密、基于角色或属性的访问控制(RBAC 或 ABAC)、数据脱敏,以及 GDPR 等法规合规要求。
- 具备出色的沟通能力,能够向高管和非技术受众清晰解释架构决策。
- 能够快速学习新系统和业务流程。
- 具备良好的人际交往能力,能够与同事和客户建立紧密的工作关系。
福利待遇
- 酌情发放的奖金计划
- 灵活的混合办公
- 每年可选择最多三周在海外工作
- 丰厚的年假
- 养老金计划
- 私人医疗保险,包括眼科护理
- 人寿保障,涵盖在职身故和重大疾病
- 全球旅行保险
- 健康与福祉计划
- 现场停车
- 提供相关技术知识的内部培训
- 支持职业发展的专业资格培训
