
高级数据工程师,Databricks Lakehouse(印度,混合办公)
打造 Flexera 的 Databricks lakehouse 与 Python 后端平台。 为技术成本优化、分析和 AI/ML 企业 SaaS 产品提供支持。
描述
- 主导可扩展、云原生后端系统和 API 的架构设计与开发。
- 构建并运营 Python API 服务(如 FastAPI),为数据平台功能提供访问接口。
- 设计并优化 PostgreSQL 模式、索引、查询和模式迁移。
- 为数据密集型工作负载的可靠性、可扩展性、性能和成本效率制定技术方向。
- 从初始设计到生产发布及后续运营,领导复杂的后端项目。
- 使用 GitHub Actions 和 Terraform 维护 CI/CD 流水线,并将变更部署到生产环境。
- 排查 API、数据库和数据流水线中的问题。
- 与数据工程、前端、平台和 SRE 团队协作。
- 制定代码质量、测试、CI/CD、可观测性和运营实践方面的工程标准。
- 为团队的技术设计和实现提供建议。
- 指导初级和高级工程师。
- 应用后端系统、云平台和大规模数据工程领域的当前实践。
- 指导 Flexera Databricks lakehouse 的设计与性能优化,以支持分析、AI/ML 和产品开发。
任职要求
- 计算机科学或工程专业学士或硕士学位,或同等实践经验。
- 至少 8 年后端工程经验。
- 具备开发 Python 应用和服务的实操经验,包括生产环境 API。
- 具备扎实的关系型数据库管理系统(RDBMS)技能,最好熟悉 PostgreSQL,包括模式设计、复杂查询开发与优化、Flyway 等迁移工具,以及查询计划性能分析。
- 具备使用 FastAPI、Flask 或同类框架设计、构建、部署和运营 REST API 的经验。
- 具备使用 GitHub Actions、Azure DevOps 或类似工具构建和维护 CI/CD 部署自动化的经验。
- 具备使用 Terraform 或同类工具实施基础设施即代码的经验。
- 能够独立配置云资源。
- 具备构建大规模数据或分析平台的经验。
- 在可观测性、监控、分布式追踪、查询分析和延迟问题排查方面经验丰富。
- 具备安全、合规和企业 SaaS 要求方面的经验。
- 具备 FinOps、云成本优化或企业 SaaS 平台方面的经验。
- 具备 AWS 经验,包括 ECS/Fargate、RDS、S3、IAM 和 Secrets Manager。
- 具备构建 AI 驱动后端系统的经验,包括基于 LLM 或由智能体驱动的工作流。
- 优先条件:具备 Power BI Direct Lake 模式和 lakehouse 分析语义建模经验。
- 优先条件:了解 Mosaic AI、Databricks GenAI 功能或特征库实现。
- 优先条件:曾为开源 Spark 项目贡献代码、发布 Databricks 社区内容,或持有 Databricks Certified Data Engineer Professional 等认证。
福利待遇
- 具有竞争力的薪酬。
- 灵活的工作安排。
- 为高级技术领导者提供明确的成长路径。
- 协作、包容且注重技术的文化。
- 平等就业机会。
- 可应要求提供工作场所便利安排。






