General Motors
General Motors
通用汽车是一家全球性的汽车与制造企业,业务涵盖车辆工程、生产、运输和信息技术。通用汽车成立于1908年,致力于开发推动出行发展的技术,并践行实现零碰撞、零排放和零拥堵的愿景。其国际化业务汇聚了众多跨学科团队,专注于创新、可持续交通以及汽车行业的未来。

数据工程、云迁移与平台工程师——通用汽车(混合办公)

通过云迁移和平台工程实现通用汽车 Oracle 工作负载现代化。 构建安全、受治理的数据平台和管道,实现基础设施自动化并建立可靠的运营实践。

描述

  • 评估基于 Oracle 的架构、工作负载、依赖关系、接口、数据流和运营流程,以规划并执行迁移。
  • 创建可扩展的批处理和近实时管道,用于数据摄取、转换、验证、对账和发布。
  • 为数据、架构、ETL/ELT 工作负载、存储过程、接口和下游使用者制定迁移方案。
  • 在 Azure、Google Cloud Platform 和多云环境中构建并运营云数据平台能力。
  • 在适当情况下应用 Databricks Workflows、Unity Catalog、Delta Lake、MLflow 和 Asset Bundles。
  • 使用 Terraform 为云、网络、数据平台和 Databricks 资源创建可复用的基础设施即代码。
  • 设计 CI/CD 工作流,并自动化开发、测试、预发布和生产环境之间的部署与环境晋级。
  • 实施涵盖身份与访问管理、加密、密钥和机密、密钥轮换及最小权限的数据安全控制。
  • 建立数据编目、血缘、分类、保留、可审计性和负责任数据使用方面的治理实践。
  • 实施监控、日志记录、告警、数据质量检查和运营仪表板。
  • 通过自动化和持续优化提升平台的可靠性、可扩展性、性能和成本效率。
  • 主导或协助事件响应、服务恢复、根因分析和事件后复盘。
  • 定义并支持 SLA、SLO、数据新鲜度目标、恢复目标和错误预算实践。
  • 构建自动化单元测试、集成测试、数据质量测试、回归测试和端到端测试。
  • 与架构师、应用团队、分析和人工智能从业者、安全合作伙伴、产品负责人及全球技术团队协作。
  • 参与为期两周的冲刺、待办事项梳理、估算、交付规划、演示和持续改进。
  • 维护架构图、数据流记录、API 与接口文档、运行手册、入职指南、README 文件和生产就绪材料。

任职要求

  • 计算机科学、工程、信息系统、数据工程或相关专业的学士学位,或同等实践经验。
  • 至少三年数据工程、云平台工程、DevOps、软件工程或相关领域的专业经验。
  • 具备交付生产级数据解决方案的实践经验。
  • 具备设计和支持数据管道及 ETL/ELT 工作负载的实践经验,最好熟悉 Oracle 或其他企业级关系型数据库。
  • 具备扎实的 Python 能力,用于自动化、开发者工具、数据工程和 PySpark 处理。
  • 具备 SQL、关系建模、架构设计、查询优化和数据对账经验。
  • 具备至少一个主要云平台的经验,优先考虑 Azure 或 Google Cloud Platform。
  • 具备使用 Terraform 构建基础设施即代码的经验,包括可复用模块、远程状态和环境特定配置。
  • 具备 Git、分支策略、拉取请求、代码审查和自动化 CI/CD 工作流经验。
  • 具备使用云数据平台或湖仓的经验,例如 Databricks、Delta Lake、BigQuery、Synapse 或同等技术。
  • 了解云网络、身份与访问管理、加密、机密管理以及安全的服务间集成。
  • 具备实施监控、日志记录、告警、运营仪表板和数据质量控制的经验。
  • 具备较强的问题排查、分析、沟通和跨职能协作能力。
  • 优先条件:具备将 Oracle 数据库、ETL 作业、存储过程或数据仓库迁移到云服务的经验。
  • 优先条件:具备 Databricks Workflows、Unity Catalog、Delta Lake、MLflow 和 Asset Bundles 的实践经验。
  • 优先条件:熟悉 ADLS Gen2、Key Vault、Entra ID、AKS、Azure 网络以及 Azure DevOps 或 GitHub Actions 等 Azure 服务。
  • 优先条件:熟悉 Cloud Storage、BigQuery、Dataproc、GKE、Pub/Sub、Secret Manager、Cloud IAM 和 VPC 网络等 Google Cloud 服务。
  • 优先条件:具备使用 Apache Kafka、Apache Pulsar、Pub/Sub 或同等技术进行流式和事件驱动处理的经验。
  • 优先条件:具备 Kubernetes、Azure Container Apps、GKE 或其他容器化运行时的经验。
  • 优先条件:具备 Datadog 或其他可观测性平台的经验。
  • 优先条件:具备 MLflow、模型或特征管道、实验跟踪以及 AI/ML 工作负载生产监控经验。
  • 优先条件:具备 HashiCorp Vault 或同类企业机密管理工具的经验。
  • 优先条件:具备在受监管、对安全敏感或企业级规模环境中的经验。
  • 优先条件:具备生产就绪评审、事件管理、事后复盘和服务可靠性实践经验。
  • 目前或未来不得需要通用汽车提供与移民相关的担保。

福利待遇

  • 混合办公安排。
  • 参与云数据平台、分析、人工智能和企业现代化相关工作。
  • 重视归属感和职业发展的包容性工作环境。
  • 提供与职位相关的评估和/或入职前筛查信息。
  • 为残障申请者提供便利支持。