高级 AI 平台专家(Azure Databricks)
为 Visium 平台团队提供 Azure Databricks 架构、MLOps、安全与可靠性方面的建议。 指导工程师,增强面向受监管行业的 AI 系统。
描述
- 指导 Visium 内部团队设计、构建并改进其 Azure Databricks AI 平台。
- 制定并评审工作区、开发、测试和生产环境、Unity Catalog、安全、网络及 Azure 集成的架构。
- 就代码、数据和模型的 CI/CD/CT 流水线提供建议,包括自动化测试、环境晋级、模型注册表工作流和持续训练。
- 评估架构决策、代码、Terraform 配置及流水线实现,并提出切实可行的建议。
- 建立可复用的 MLOps 标准、模板和工程实践。
- 提升平台的可靠性、可扩展性、治理、安全性和运维能力。
- 通过动手排查问题和提供参考实现,帮助团队解决阻碍。
- 指导团队成员,主持设计和代码评审,并分享知识,增强团队独立工作能力。
任职要求
- 具备数据工程、机器学习工程、平台工程或 MLOps 方面的丰富经验;优先考虑拥有八年或以上相关经验者。
- 拥有丰富的 Azure Databricks 生产环境经验;优先考虑拥有三年或以上经验者。
- 了解 MLOps 和 Databricks 生态系统,包括 MLflow、模型注册表、Model Serving、Feature Engineering、Databricks Workflows 和监控。
- 设计并实现过 CI/CD/CT 流水线,最好使用过 GitLab,并践行基础设施即代码。
- 具备 Terraform 和云基础设施的实操经验,最好使用过 Databricks 和 Azure 提供程序。
- 熟悉 ADLS Gen2、Key Vault、Entra ID 等 Azure 服务及云网络,包括 VNet 注入和专用终结点。
- 具备扎实的 Python 和 PySpark 技能,并能在测试、打包和代码质量方面运用软件工程实践。
- 有使用 Unity Catalog 进行数据治理、数据沿袭管理和访问控制的经验。
- 能够指导工程师、主持设计和代码评审,并建立技术标准。
- 具备使用 Databricks GenAI/LLMOps 工具(如 Vector Search、Mosaic AI Agent Framework 和 AI Gateway)的经验者优先。
- 具有构建安全的云专用网络环境和处理敏感数据的经验者尤佳。
相关职位
未找到职位
尝试调整或清除筛选条件,以查看更多机会。
