高级数据工程经理 – GCP、AI/ML 与 GenAI（美国远程）
负责从 AWS 到 GCP 的数据平台迁移，并使用 GCP 和 Vertex AI 构建企业级 AI/ML、GenAI 与 MLOps 解决方案。 为全球工程与 IT 服务合作伙伴推动现代化计划。
描述
- 负责企业级数据平台从 AWS 迁移到 GCP
- 设计可扩展的 GCP 数据平台、数据湖和湖仓
- 使用 GCP 和 Vertex AI 开发 AI/ML、生成式 AI、RAG 和 MLOps 解决方案
- 构建涵盖数据准备、训练、验证、部署、监控、再训练和生命周期管理的端到端机器学习流水线
- 设计摄取、转换、嵌入、索引、检索、批处理、流处理、ETL 和 ELT 流水线
- 评估 AWS 环境，并将工作负载映射到相应或更优的 GCP 服务
- 制定涵盖阶段、依赖关系、风险、回滚计划和目标架构的迁移路线图
- 使用 Pub/Sub、Dataflow 或 Apache Beam、BigQuery 和 Cloud Storage 设计事件驱动的实时流水线
- 建立企业级数据模型、BigQuery 分区与集群策略，以及分析数据消费模式
- 制定数据治理、质量、血缘、元数据、安全、隐私、访问控制和负责任 AI 标准
- 负责 Terraform 自动化、CI/CD、部署、测试，以及 Dev、QA、UAT 和生产环境之间的晋级
- 提升性能、可扩展性、延迟、吞吐量、可靠性和云成本，同时定义基准和 SLA
- 管理和指导数据工程师、高级数据工程师及技术负责人，并开展架构和代码评审
- 监控工程进度、交付风险、依赖关系和里程碑
- 担任美国利益相关方的主要技术联系人，并与业务、产品、数据科学、BI、DevOps、安全和分析团队合作
- 将业务需求转化为技术方案，并沟通架构决策、迁移计划、路线图、风险和权衡
任职要求
- 拥有 15 年以上 GCP 数据工程、数据架构、云工程、AI/ML 工程或相关技术领导经验
- 至少 5 年 GCP 数据工程实战经验
- 至少 3 年 AI/ML 和 GenAI 实战经验
- 具备交付 AWS 到 GCP 迁移项目的经验
- 具备在 GCP 上设计企业级数据湖和湖仓平台的丰富经验
- 熟练掌握 BigQuery、Google Cloud Storage、Dataflow、Pub/Sub、Cloud Composer、Dataproc、IAM 和 Terraform
- 具备将 AWS 数据工作负载、流水线和平台迁移到 GCP 的经验
- 深入了解 AWS 到 GCP 的服务映射、迁移模式、现代化改造和云架构实践
- 具备使用 Vertex AI 在 GCP 上构建和部署 AI/ML 解决方案的经验
- 具备生成式 AI、LLM 应用、RAG、嵌入、向量搜索、提示词工程和企业 AI 助手的实战经验
- 深入掌握涵盖训练、模型注册表、CI/CD/CT、部署、监控、再训练、治理和回滚的 MLOps
- 具备交付安全且负责任的 AI 解决方案的经验，涵盖隐私、评估、访问控制、可审计性和治理
- 精通 SQL，并具备扎实的 Python 和 PySpark 能力
- 具备数据建模、数据仓库、批处理和实时数据工程背景
- 具备 Terraform、Git、GitHub、Cloud Build、CI/CD 和基础设施自动化经验
- 具备领导和指导数据工程及跨职能技术团队的经验
- 沟通能力强，并具备与美国利益相关方合作的经验
- 优先考虑持有 Google Cloud Professional Data Engineer 认证者
- 优先考虑持有 Google Cloud Professional Machine Learning Engineer 认证者
- 优先考虑具备 Vertex AI Agent Builder、Vertex AI Search、Gemini on Vertex AI 或企业级生成式 AI 平台经验者
- 优先考虑具备 dbt、Apache Airflow、Kafka、Apache Spark、Kubernetes、Cloud Run 和 API 驱动架构经验者
- 优先考虑具备 Dataplex、Data Catalog、血缘、元数据管理、治理、主数据管理和数据质量框架经验者
- 优先考虑具备支持企业或受监管环境经验者，能够满足严格的隐私、安全、合规、审计和治理要求
- 技术能力应涵盖 Python、PyTorch、TensorFlow、Scikit-learn、NLP、深度学习、ML 算法、GenAI、LLM、GPT、Gemini、Claude、Llama、提示词工程、微调、RAG、嵌入、向量数据库、语义与混合搜索、重排序、LangChain、LlamaIndex、LangGraph、Hugging Face、Transformers、AI 智能体、智能体工作流、工具或函数调用、多智能体系统、MCP、MLflow、Kubeflow、模型注册表、部署、监控、CI/CD、Vertex AI、Vertex AI Studio、Vertex AI Pipelines、Model Garden、Vector Search、FastAPI、Flask、REST API、SQL、Docker、Kubernetes、GCP、AWS、Azure、BigQuery、Dataflow、Spark、Databricks、数据湖、高级 Python、专家级 SQL、PySpark、Apache Spark、ETL、ELT、CDC、批处理与流处理、事件驱动架构、流水线开发与优化、企业级数据湖与湖仓、Medallion Architecture、数据仓库、数据建模、维度建模、多租户建模、读时模式与写时模式、dbt、Apache Airflow 或 Cloud Composer、Dataproc、Dataflow 或 Apache Beam、AWS Glue、Redshift、EMR、Lambda、Kinesis、Athena、CloudWatch、GCS、AWS S3、Pub/Sub、Dataplex、Data Catalog、Terraform、Git 或 GitHub、Cloud Build、CI/CD、基础设施即代码、血缘、元数据管理、数据质量、监控和 OpenLineage
福利待遇
- 灵活的远程办公方式
- 与全球客户合作
- 在注重创新的环境中协作
- 获得持续学习和认证机会
- 作为工程负责人领导重要的 AI/ML 和 GCP 创新计划