
数据工程师 III
在沃尔玛构建可扩展的云数据管道和 ETL 系统, 为分析和业务决策提供受治理的高质量数据。
描述
- 构建并维护可扩展的数据管道和 ETL 工作流。
- 与跨职能团队合作,将数据需求转化为数据模型和实用解决方案。
- 利用云平台、Apache Spark 和数据湖创建数据集成与数据摄取方案。
- 在整个数据生命周期中维护数据质量、治理和法规遵从性。
- 提升数据存储、转换和检索的速度与扩展能力。
- 编写并测试数据处理代码,并支持其部署和文档编写。
- 跟进数据工程实践和趋势,持续改进相关工作。
- 支持企业数据战略、治理、创新和卓越运营。
任职要求
- 计算机科学学士学位及两年软件工程或相关经验,或四年此类经验,或计算机科学硕士学位。
- 具备跨多个平台的数据工程丰富经验。
- 精通 Scala 和 Apache Spark。
- 具备 Google Cloud Platform 服务经验,包括 BigQuery、GCS 和 Dataproc。
- 具备使用 Kafka 和 Spark Structured Streaming 进行近实时数据摄取的经验。
- 熟练掌握 SQL 和 NoSQL 系统。
- 深入理解数据仓库概念和实践。
- 具备 Git 或其他版本控制工具、CI/CD 流水线以及 Airflow 等工作流调度器的使用经验。
- 具备处理大型数据集的经验。
- 熟悉 Tableau 或 Looker 等商业智能和可视化工具。
- 具备生成式 AI 和智能体 AI 的实践经验者优先。
福利待遇
- 绩效奖金。
- 医疗、视力和牙科保险。
- 401(k) 计划。
- 员工购股计划。
- 公司支付的人寿保险。
- 带薪休假,包括病假。
- 育儿假。
- 家庭照护假。
- 丧亲假。
- 陪审义务假。
- 投票假。
- 短期伤残保险。
- 长期伤残保险。
- 公司折扣。
- 军假薪酬。
- 收养和代孕费用报销。
- 可将 PTO 和/或 PPTO 用于休假、病假、节假日或其他用途。
- 符合条件的项目可通过 Live Better U 教育福利享受沃尔玛支付的学费、书本费和杂费。
- 通过 Live Better U 提供英语学习和短期证书课程。


