高级测试数据工程师
为CGI(全球IT与商业咨询公司)验证企业数据平台、ETL流水线和数据质量。 使用SQL测试云技术和大数据技术。
描述
- 为企业数据平台、ETL/ELT流水线和数据集成解决方案制定并执行测试计划、场景和用例。
- 端到端测试ETL工作流,检查源系统与目标系统之间的数据准确性、完整性、转换逻辑、对账情况和质量。
- 编写并运行复杂SQL查询,验证后端和数据。
- 使用Databricks、Apache Spark、PySpark、Python、Hive、Hadoop/HDFS和Azure Data Factory测试大规模数据处理。
- 对数据流水线和应用开展功能、集成、回归、系统及数据质量测试。
- 在Control-M和Unix/Linux环境中检查批处理、定时作业、依赖关系和工作流运行情况。
- 记录、跟踪并重新测试缺陷,与开发人员、数据工程师、业务分析师及其他相关方协作,直至问题解决。
- 在适用情况下构建并维护可复用的测试脚本和自动化测试。
- 参与敏捷/Scrum工作,包括冲刺计划、需求细化、每日站会、评审和回顾。
任职要求
- 具备至少8年软件质量工程或测试经验。
- 拥有丰富的ETL测试、数据验证、集成测试和回归测试经验。
- 熟练使用SQL,包括用于源到目标验证、对账和数据质量测试的复杂查询。
- 具备测试大规模数据平台和ETL/ELT流水线的经验。
- 拥有Databricks、Apache Spark、PySpark、Python和Azure Data Factory(ADF)的实际操作经验。
- 具备Hadoop生态技术经验,包括Hadoop/HDFS和Hive。
- 能够在Unix/Linux环境以及Control-M等企业级作业调度工具中开展工作。
- 理解数据质量、数据转换、数据映射和源到目标验证。
- 具备在敏捷/Scrum交付环境中进行缺陷和测试管理的经验。
- 具备出色的分析、故障排查、沟通和协作能力。
- 能够完成美国就业所需的背景调查。
福利待遇
- 具有竞争力的薪酬和利润分享计划。
- 医疗、牙科和视力保险。
- 基本人寿保险以及意外身故和伤残保险。
- 通过401(k)计划提供雇主匹配缴款。
- CGI股票购买计划。
- 每年累积10至20天带薪年假。
- 每年10天带薪假日。
- 至少80个连续小时的带薪病假和安全假。
- 20至70个连续工作日的带薪育儿假。
- 每年1至7天丧亲假。
- 按传唤期限提供带薪陪审团服务假。
- 学习机会和学费补助。
- 健康与身心福祉计划。
- 远程办公灵活性。
- 提供灵活性的混合办公模式。
- 员工资源小组和社区活动。
