
技术架构师助理,Databricks——浦那现场办公
为 YASH Technologies 设计 AWS 和 Databricks Lakehouse 平台,使用 Python、PySpark 和 SQL 开发具备治理能力的数据管道与生成式 AI 解决方案。
描述
- 在 AWS 和 Databricks 上创建并优化可扩展的数据管道
- 开发和管理基于 Delta Lake、Iceberg 和 Unity Catalog 构建的 Lakehouse 架构
- 建立涵盖数据质量、数据血缘、元数据和安全性的数据治理实践
- 使用 Python、PySpark 和 SQL 构建 ETL 与 ELT 工作流
- 交付 RAG 聊天机器人和 AI 智能体等生成式 AI 能力
- 应用上下文工程和语义搜索方法,提升 AI 性能
- 与架构师、数据科学家及业务利益相关者合作,推进企业数据项目
- 维护平台的可扩展性、性能、可靠性和成本效率
任职要求
- 至少 10 年专业工作经验
- 具备 AWS 分析服务的实践经验,包括 S3、Glue、Athena、Redshift、Lake Formation、Lambda、DataZone 和 DynamoDB
- 具备 Databricks 技术的实践经验,包括 Delta Lake、Iceberg、Unity Catalog、Delta Live Tables、MLflow、Mosaic AI、Vector Search、Genie Agent 和 Genie One
- 精通 Python、PySpark 和 SQL
- 了解 ETL 与 ELT、数据建模、数据仓库、Lakehouse 架构和 Medallion 架构
- 了解数据质量、数据血缘、元数据管理、目录编制、可观测性和安全性
- 具备 AWS Bedrock、SageMaker、RAG、上下文工程、语义搜索、AI 智能体和大语言模型编排经验
福利待遇
- 灵活的工作安排
- 结构化的职业技能发展模式
- 持续学习、主动舍弃旧知并重新学习的机会
- 稳定的就业保障
- 包容的团队文化
- 协作型工作环境
- 与实现业务目标相一致的支持
- 积极的工作氛围和合乎道德的企业文化









