Brillio
Brillio
Brillio 是一家技术咨询公司,帮助医疗保健、保险、物流、金融服务、电信与媒体、生命科学和零售等领域的组织推进数字化转型。其业务涵盖客户体验、数据与人工智能、生成式人工智能、产品与平台工程,以及基础设施、云计算和安全。Brillio 将工程专业能力与行业知识相结合,开发数字产品并推动技术环境现代化,帮助企业应对不断变化的市场和技术需求。

Brillio 混合办公数据工程师——dbt 与 Snowflake

加入 Brillio,担任专注于逆向分析定价逻辑的数据工程师,并将其重建为受治理的 Silver 层 dbt 模型。 验证结果一致性、记录数据血缘,并在分析师批准后废弃旧的 Gold 层定义。

描述

  • 与定价分析师合作,梳理 Gold 层定义、计算逻辑、转换过程、依赖关系、假设、边界情况和歧义
  • 逆向分析分析师 SQL、电子表格公式和临时计算,以确定预期的业务行为
  • 将旧有逻辑转化为明确的技术要求和切实可行的迁移计划
  • 将获批准的定价定义构建为 Silver 层中受治理、可复用且有文档记录的 dbt 模型
  • 遵循既定的数据建模、命名、测试、版本控制和代码审查标准
  • 创建可扩展、易维护且可审计的模型,不依赖未记录的分析师知识
  • 实施 dbt 测试,覆盖唯一性、非空性、可接受值、关系和业务规则
  • 将 Silver 层输出与现有 Gold 层结果进行核对,并调查差异
  • 在具有代表性的时间段、细分群体、边界条件和已知例外情况下测试迁移结果
  • 在完成一致性审查并获得定价分析师批准后完成迁移
  • 与定价分析师合作,澄清计算逻辑、确认预期行为并就预期结果达成一致
  • 在废弃旧定义前开展演示和审查,并记录分析师批准结果
  • 让技术和业务利益相关者及时了解风险、未解决问题、依赖关系和决策
  • 在 dbt 和 Confluence 中记录业务背景、计算规则、假设、例外、输入、所有权、数据血缘、测试和下游使用者
  • 在 Silver 层替代方案完成验证、获批并投入使用,且下游依赖已更新后,废弃临时 Gold 层逻辑
  • 确认已废弃的逻辑不再被使用,并更新运营文档以反映新的事实来源

任职要求

  • 具有五至八年分析型数据平台数据工程经验
  • 精通 SQL,包括连接、窗口函数、CTE、聚合、条件逻辑和优化
  • 具备实际 dbt 经验,涵盖模型、测试、文档和数据血缘
  • 深入了解 Snowflake,包括数据建模、性能调优和数据仓库概念
  • 具备重构、迁移或现代化复杂分析逻辑的经验
  • 能够解读临时 SQL 和电子表格计算,并验证其输出
  • 深入掌握数据质量、核对、测试和发布控制
  • 能够与非工程领域利益相关者合作,澄清需求并验证结果
  • 沟通清晰,具备严谨的文档记录习惯
  • 具备 Python 经验者优先
  • 具备 Airflow、Confluence、Jira 和 Slack 使用经验
  • 具备涵盖数据建模、质量验证、核对、迁移规划、利益相关者协作和技术文档的综合经验