Databricks 高级首席数据工程师
在 Niji 这家数字与技术咨询公司，负责为分析、机器学习和生成式 AI 设计并规模化建设数据平台。 该职位结合 Databricks 技术领导、工程师指导和客户咨询。
描述
- 将业务挑战转化为切实可行的数据解决方案。
- 设计可扩展且安全的 Databricks 与 Lakehouse 架构。
- 制定技术方向、技术选型和开发标准。
- 设计并监督高性能、可投入生产的数据管道。
- 在 Spark、Delta Lake、Unity Catalog 和 Databricks 领域应用最佳实践。
- 保障数据处理的质量、性能、可靠性和治理。
- 为分析、机器学习和生成式 AI 构建数据平台。
- 与数据科学和 AI 团队合作，为 AI 模型和应用准备数据及数据流。
- 通过 CI/CD、监控和 DataOps 将解决方案从设计阶段推进到生产环境。
- 担任数据工程和 Databricks 领域的技术权威。
- 在技术决策和职业发展方面指导数据工程师。
- 推广良好的工程实践，并协助制定团队的技术标准。
- 参与投标答复和商业提案。
- 评估客户需求并推荐高价值的数据解决方案。
- 为客户提供 Databricks、Lakehouse 架构和生产级数据平台方面的咨询。
任职要求
- 大学学位、工程学位或同等硕士层级学历。
- 拥有丰富的数据工程经验，最好曾在复杂或高数据量环境中工作。
- 职位信息注明需具备五至十年经验。
- 具备已在生产环境中应用的 Databricks 专业能力。
- 深入了解 Spark、Delta Lake、数据建模和 Lakehouse 架构。
- 熟练掌握至少一种云平台：Azure、AWS 或 GCP。
- 具备扎实的 Python 和 SQL 技能。
- 具备 CI/CD、编排、监控和 DataOps 等生产实践经验。
- 了解数据治理、质量、安全和性能优化。
- 能够为分析、机器学习或生成式 AI 设计数据平台。
- 能够评估技术选型并支持团队工作。
- 能够为团队和客户提供技术领导。
- 持有 Databricks 认证者优先。
福利待遇
- 通过 Niji University 进行职业发展，可使用超过 33,000 项学习资源并积累实践经验。
- 团队和专业人员可使用当前的 AI 工具。
- 通过定期一对一沟通、专属人力资源业务伙伴和技能框架获得个性化支持。
- 弹性工作时间。
- 远程办公。
- 餐券。
- 交通补贴。
- 可使用服务平台。
- 践行负责任的商业承诺并实施有力的企业社会责任政策。
- 参与服务大型企业和中型企业的高影响力项目。
- 加入涵盖咨询、设计、数据、AI、网络安全和技术的多学科团队。
