印度高级生成式人工智能工程师(远程)
构建可扩展的 Databricks 数据平台、数据管道和云架构,为分析与人工智能应用提供支持。 为位于印度的客户交付生产级数据解决方案。
描述
- 设计和维护可扩展的数据工程与分析解决方案
- 构建可靠的批处理和实时数据管道
- 开发基于 Databricks 的数据平台和云工作流
- 处理复杂数据集,以支持分析、报告和人工智能应用
- 创建数据模型,并优化工作流以提升规模扩展能力和性能
- 连接结构化和非结构化数据源
- 建立数据质量、验证、监控和治理实践
- 与数据科学家、分析师、工程师、产品团队及业务利益相关者合作
- 将业务需求转化为可扩展的数据和技术解决方案
- 解决数据管道、数据处理、性能和集成问题
- 改进数据架构和工作流,以提升可靠性、效率并降低成本
- 协助现代化基于云的数据架构和平台
- 创建可复用的框架、组件和工程实践
- 支持生产部署、监控和维护
- 跟踪数据工程、云、分析、人工智能和现代数据平台领域的发展
任职要求
- 至少五年数据工程、分析工程、数据平台或相关技术岗位的专业经验
- 具备设计和构建可扩展数据管道及数据处理解决方案的实践能力
- 具备 Databricks 和现代云数据平台的实际经验
- 深入了解数据工程、数据建模、ETL/ELT 和分布式处理
- 具备 AWS、Azure 或 Google Cloud Platform 使用经验
- 熟练使用 Python、SQL、Scala 或 Java 进行编程和脚本编写
- 具备关系型和非关系型数据库以及大型数据集的使用经验
- 了解数据架构、集成模式、性能优化和数据质量
- 具备支持分析、商业智能、机器学习或人工智能应用场景的经验
- 具备较强的分析推理和问题解决能力
- 能够与技术团队及跨职能团队有效协作
- 具备向业务利益相关者清晰讲解技术概念的沟通能力
- 具备敏捷且快速变化的技术环境工作经验
- 能够独立领导项目,从需求分析推进至生产实施
- 对新兴数据、云、分析和人工智能技术表现出明确兴趣
