
临时数据工程师(远程,秘鲁)
构建可靠的 Zuora 至 GCP ETL 数据管道,为 Applaudo 的 AI 解决方案提供支持。 在异步协作的分布式团队中维护集成、数据质量、监控和数据仓库验证。
描述
- 构建并维护连接 Zuora REST API 与 GCP 数据仓库的 ETL 管道。
- 使用 TypeScript/Node.js 和 Python 开发并维护集成。
- 转换账单事件、订阅生命周期、发票、付款和收入数据。
- 遵循既定架构、开发模式、规范和 CI/CD 工作流。
- 使用 BigQuery、Cloud Storage、Dataflow 和 Pub/Sub 构建数据管道。
- 设置管道监控、告警、错误处理、重试机制和数据质量控制。
- 编写复杂 SQL 查询,验证源系统与数据仓库表之间的数据一致性。
- 与业务架构师合作落实数据验证要求。
- 排查管道故障、数据差异和集成问题。
- 协助确保数据从源系统准确、可靠地流入数据仓库环境。
- 在分布式、异步优先的团队中清晰地书面汇报并有效协作。
- 参与既定的 Agile/Kanban 工作流程。
任职要求
- 具有至少 5 年数据工程、集成开发或相关岗位的专业经验。
- 具备使用 TypeScript 和 Node.js 构建 ETL 或数据集成管道的生产环境经验。
- 具备扎实的 Python 技能,专注于数据管道开发。
- 有使用 GCP 服务的实操经验,包括 BigQuery、Cloud Storage、Dataflow 和 Pub/Sub。
- 具备 REST API 集成经验,熟悉 OAuth 2.0、分页、错误处理和重试机制。
- 具备高级 SQL 技能,并有复杂数据仓库架构的经验。
- 具备开发数据转换和数据质量验证的经验。
- 了解管道监控、告警、故障恢复和运营支持。
- 具备在既定架构、编码规范和 CI/CD 工作流中工作的经验。
- 能够独立完成入职熟悉流程,并在现有代码库中快速开展工作。
- 具备出色的书面沟通能力和异步优先的协作方式。
- 具备日常使用英语与国际团队协作的能力。
- 能够与太平洋时间重叠工作,主要为太平洋时间上午 10:00 至下午 2:00。
- 有 Zuora REST API 和 ZOQL 经验者优先。
- 了解 Zuora 账单对象(包括订阅、发票和付款)者优先。
- 有 dbt 或类似数据转换框架经验者优先。
- 持有 GCP Professional Data Engineer 认证者优先。
福利待遇
- 可选择远程工作。
- 全职雇用。
- 临时职位。
相关职位

