沃尔玛软件工程师 III(大数据)
为沃尔玛云数据平台构建可扩展的大数据应用和工具。 在班加罗尔开发 Java 和 Python 服务、分析基础设施及安全的数据管道。
描述
- 构建并测试可扩展的应用和平台工具,用于云数据仓库和大规模数据处理。
- 为内部团队创建自动化、自助服务工具和平台服务。
- 与同事合作制定软件实践和要求。
- 维护代码并提供更新,以提升平台的可靠性、成本效率和大规模查询性能。
- 在程序和产品发布前进行评审和测试。
- 诊断并解决编码和数据管道问题。
- 构建工具,用于监控和执行访问控制、数据治理以及敏感信息共享保护措施。
- 寻找提升平台自动化水平和效率的机会。
- 遵守公司政策、流程、使命、价值观、道德规范和诚信标准。
任职要求
- 拥有计算机科学或相关技术领域的 B.E.、B.Tech、硕士或 MCA 学位。
- 拥有所列计算机相关专业的学士学位及至少两年软件工程或相关经验,或至少四年软件工程或相关领域经验。
- 具备至少 5.5 年使用 Java 或 Python 进行面向对象编程的经验。
- 具备扎实的计算机系统基础、数据结构与算法知识,以及解决问题的能力。
- 拥有使用 RESTful API、Spring 或 Spring Boot,以及 Kafka 或 Pub/Sub 等消息系统构建 Web 服务或应用的实践经验。
- 了解 Google Cloud 数据框架,包括 BigQuery、BigLake、Dataproc(GCP 上的 Spark 或 Hive)以及 Cloud Composer(托管式 Airflow)。
- 具备扎实的 SQL 技能,包括 BigQuery SQL、分区与集群策略,以及查询性能调优。
- 具备系统设计和分布式系统经验,包括大型数据平台的扩展与容错。
- 具备出色的组织、沟通和人际交往能力。
- 接触过 Cassandra、Elasticsearch 和 MongoDB 等 SQL 或 NoSQL 数据库。
- 接触过云基础设施,主要为 GCP;了解 Azure 或 AWS 更佳。
- 接触过构建、CI/CD 和部署流水线,以及 Kubernetes、Docker、Jenkins 和 Terraform 等工具。
- 持续主动地探索、改进、自动化和优化系统与工具。
福利待遇
- 绩效激励奖励
- 产假和育儿假
- 带薪休假
- 健康福利
