高级技术负责人,数据工程 — Marsh McLennan,墨西哥城
在 Marsh McLennan 带领数据工程团队亲自参与交付,将业务优先事项转化为可靠的数据解决方案。 在 AWS 和 Azure 上构建并运维 Databricks 数据管道。
描述
- 带领由 4–8 名数据工程师组成的交付小组,成员包括正式员工和承包人员。
- 制定技术方向,将工作拆解为可管理的任务,协调冲刺执行,并对小组交付成果负责。
- 随着项目收尾或转入稳定运营,与工程师一起转向优先级较高的项目。
- 使用 SQL、Python 和 Spark 编写代码、构建管道并排查生产问题。
- 设计数据模型、奖牌式架构、数据摄取契约和可复用的工程模式。
- 管理架构变更、数据质量检查、幂等性和数据沿袭。
- 与项目负责人及业务相关方合作,将业务问题转化为数据解决方案。
- 推动 CI/CD、版本控制、测试、代码审查、文档、开发者体验和运营实践。
- 在 AWS 和 Azure 上运行 Databricks,使用 Unity Catalog、Delta Lake、Spark、基础设施即代码、Git 工作流和管道编排工具。
任职要求
- 至少 5 年亲自从事数据工程的经验,并具备一定的工程师带领或指导经验。
- 近期持续深入使用 SQL、Python 和 Spark。
- 具备云数据平台的实务经验,优先考虑 Databricks;在 AWS、Azure 或 GCP 上使用 Snowflake、Synapse 或类似平台的经验也相关。
- 能够通过设定预期、管理绩效和促进团队凝聚力,带领由正式员工和承包人员组成的混合团队。
- 了解现代工程实践,包括 Git、CI/CD、自动化测试、基础设施即代码和 DataOps。
- 对业务领域抱有好奇心。
- 沟通清晰,能够向业务领导解释技术权衡,并向工程师传达业务需求。
- 具备 Databricks、Unity Catalog、Delta Lake、奖牌式架构和 Databricks 工作流经验者优先。
- 具备 dbt 或类似转换框架经验者优先。
- 熟悉数据治理实践者优先,例如数据沿袭、访问控制、元数据管理和数据质量框架。
- 有金融服务、保险、福利或咨询领域工作经验者优先。
- 具备文档或非结构化数据摄取管道构建经验者优先。
- 接触过基于 LLM 的工具、AI 辅助开发或分析工程者优先。
福利待遇
- 混合办公,可灵活远程工作并到办公室协作。
- 通过办公室协作获得专业发展机会。
- 多元、包容且灵活的工作环境。
