YASH Technologies
YASH Technologies
YASH Technologies 是一家全球性技术服务与外包公司,帮助各类组织实现运营现代化并提升生产力。其业务涵盖数字化转型、人工智能与自动化、云服务、网络安全、物联网、应用管理和企业咨询。公司还支持 SAP 实施与云转型项目,为咨询、医疗保健和物流等多个行业的组织提供服务。其团队致力于交付量身定制的技术解决方案,注重实际业务成果与客户成功。

技术架构师助理,Databricks——浦那现场办公

为 YASH Technologies 设计 AWS 和 Databricks Lakehouse 平台,使用 Python、PySpark 和 SQL 开发具备治理能力的数据管道与生成式 AI 解决方案。

描述

  • 在 AWS 和 Databricks 上创建并优化可扩展的数据管道
  • 开发和管理基于 Delta Lake、Iceberg 和 Unity Catalog 构建的 Lakehouse 架构
  • 建立涵盖数据质量、数据血缘、元数据和安全性的数据治理实践
  • 使用 Python、PySpark 和 SQL 构建 ETL 与 ELT 工作流
  • 交付 RAG 聊天机器人和 AI 智能体等生成式 AI 能力
  • 应用上下文工程和语义搜索方法,提升 AI 性能
  • 与架构师、数据科学家及业务利益相关者合作,推进企业数据项目
  • 维护平台的可扩展性、性能、可靠性和成本效率

任职要求

  • 至少 10 年专业工作经验
  • 具备 AWS 分析服务的实践经验,包括 S3、Glue、Athena、Redshift、Lake Formation、Lambda、DataZone 和 DynamoDB
  • 具备 Databricks 技术的实践经验,包括 Delta Lake、Iceberg、Unity Catalog、Delta Live Tables、MLflow、Mosaic AI、Vector Search、Genie Agent 和 Genie One
  • 精通 Python、PySpark 和 SQL
  • 了解 ETL 与 ELT、数据建模、数据仓库、Lakehouse 架构和 Medallion 架构
  • 了解数据质量、数据血缘、元数据管理、目录编制、可观测性和安全性
  • 具备 AWS Bedrock、SageMaker、RAG、上下文工程、语义搜索、AI 智能体和大语言模型编排经验

福利待遇

  • 灵活的工作安排
  • 结构化的职业技能发展模式
  • 持续学习、主动舍弃旧知并重新学习的机会
  • 稳定的就业保障
  • 包容的团队文化
  • 协作型工作环境
  • 与实现业务目标相一致的支持
  • 积极的工作氛围和合乎道德的企业文化

相关职位