高级数据工程师——巴西远程办公
高级数据工程师，负责在 Google Cloud 上构建可扩展的批处理和流处理管道。该职位专注于数据建模、工作流编排，以及为分析提供可靠的数据交付。
描述
- 在 Google Cloud 上创建和维护具有高可靠性的批处理和流处理管道。
- 开发数据摄取和转换流程，使来自不同来源的数据可供使用。
- 设计分析型数据模型，兼顾性能和成本效率。
- 编排和监控工作流，同时管理故障、数据质量和可靠性。
- 遵循基于 Git 的版本控制、CI/CD、测试和技术文档等良好实践。
- 与架构师、分析师和业务利益相关者合作，包括参加英语会议。
- 协助制定技术决策并推进数据架构发展。
任职要求
- 拥有丰富的高级数据工程师工作经验。
- 具备 GCP 数据服务的实际操作经验，包括 BigQuery、Dataflow、Cloud Composer（Airflow）、Pub/Sub、Cloud Storage 和 Dataproc。
- 精通 SQL 和 Python。
- 具备创建维度数据模型以及数据湖或湖仓架构的经验。
- 了解基于 Git 的版本控制和 CI/CD 方法。
- 英语高级水平。
福利待遇
- 完全远程办公。