
首席数据架构师(Databricks 与 Azure)
负责设计受治理的 Databricks 与 Azure 分析平台,为 Medicaid 财务管理服务提供支持。 构建主数据能力、解决参与者与服务提供者身份匹配问题,并大规模交付合规数据产品。
描述
- 创建并监督受治理的数据产品,包括经认证的 Gold 层数据集、共享语义层与指标层,以及可复用、可供客户使用的数据模型。
- 开发可配置、基于标准的方法,以适应法规变化和项目需求。
- 制定数据沿袭、质量检查和审批的认证实践。
- 将客户反复提出的需求转化为平台功能。
- 主导 Databricks 和 Azure 上的目标态分析架构。
- 针对全国范围的运营,以及项目和州级数据域之间的监管差异进行设计。
- 构建企业主数据层,并管理连接参与者与服务提供者身份的主实体索引。
- 主导第三方数据的接收与集成。
- 使用 Spark、Python、SQL、dbt、Azure Data Factory 或类似工具开发并优化批处理和流式数据管道。
- 提升性能、分区策略和查询效率,并降低存储与计算成本。
- 制定并落实数据质量、沿袭和文档要求。
- 建立治理、安全、访问控制和元数据实践,使其符合 HIPAA/HITECH、CMS 与 Medicaid 项目完整性要求、SOC 2 及适用的州级要求。
- 记录架构标准,并在投入生产、交付客户或提交监管机构前独立评估技术就绪情况。
- 与工程、合规、财务、分析和业务负责人协作,推进数据战略与现代化。
- 管理并指导两名数据工程师,包括分配工作和审查交付成果。
- 交付经认证的数据集、一致的指标定义、投入生产的主人员索引、受治理且可配置的代码模式、完整记录的数据沿袭、自动化质量检查,并缩短分析交付时间。
任职要求
- 具备深厚且可证明的 Databricks 和 Azure 企业云数据架构专业能力,包括 Unity Catalog、奖牌式架构和 Delta Lake。
- 拥有主数据管理和实体解析的实施经验,包括匹配方法、存续规则以及个人级数据管理。
- 能够严格应用维度建模和规范化数据建模,并设计供分析师使用的语义层与指标层。
- 具备 CI/CD、测试和版本控制的实际经验。
- 拥有计算机科学、信息系统、工程或相关学科的学士学位,或具备同等专业经验。
- 拥有至少 10 年数据架构、数据工程或企业数据平台开发经验,其中包括对企业级设计承担首席级别的责任。
- 具备在生产环境中设计和运营 Azure 上 Databricks 的经验。
- 具备实施 MDM 和实体解析的实际经验。
- 有在多方利益相关者参与的环境中制定架构标准和治理规范的记录。
- 符合在美国远程工作的资格。
- 优先条件:具备医疗保健、Medicaid 或政府项目数据经验;面向客户的分析或咨询经验;熟悉 Apache Iceberg 和开放表格式。




