
高级首席数据工程师
负责设计 Databricks、Python 和 SQL 数据管道,服务于 Redhorse Corporation 的政府技术项目。 助力现代化关键美国国防系统,支持国家安全任务。
描述
- 设定每日工作重点并为团队提供技术指导。
- 主导代码审查,贯彻良好的设计实践,并指导工程师进行模块化 Python 开发和 SQL 调优。
- 将复杂的任务需求转化为技术规范、接口设计和可扩展的数据模型。
- 在 Databricks 中设计、构建并调优高吞吐量 ETL 和 ELT 工作流。
- 改进 Python 和 SQL 代码库,以提升性能、稳定性和安全性。
- 发现管道瓶颈,排查复杂工作流问题,并通过自动化提升可靠性和数据完整性。
- 与政府产品负责人、数据科学家、数据分析师及技术同事协作。
- 记录架构决策,组织技术冲刺,并向技术及非技术受众说明工程权衡。
- 创建并维护管道架构文档和配置。
任职要求
- 必须是美国公民。
- 必须持有有效的美国政府机密(Secret)安全许可;未持有该许可的申请人无法进入考虑范围。
- 至少八年专业数据工程经验,曾构建企业级数据平台和管道。
- 具备指导工程师、开展代码审查并监督其日常技术工作的能力。
- 具备在 Databricks 中设计和优化数据转换工作流的实操经验。
- 熟练掌握模块化、面向对象的 Python 和 PySpark 脚本开发。
- 拥有编写、调优和优化复杂 SQL 查询的丰富经验。
- 具备使用现代数据可视化工具制作实用、以用户为中心的报告和仪表板的经验。
福利待遇
- 完善的福利计划。
- 在适用情况下提供基于绩效或其他形式的激励薪酬。
- 为符合条件的残障人士或残障退伍军人提供合理便利。




