高级数据工程师,Databricks(西班牙远程办公)
负责使用 Databricks、Apache Spark 和 Azure 构建云原生数据平台的高级数据工程师。该职位专注于打造可扩展的数据解决方案,支持 knowmad mood 的数字化转型工作。
描述
- 设计和开发可扩展的云端数据架构,重点关注性能、安全性、可靠性和成本效益
- 使用 Databricks、Apache Spark 及现代数据平台技术引领数据工程最佳实践
- 创建可复用的数据摄取框架和参考模式,用于集成企业应用、API、流式平台和外部数据源
- 构建、维护和优化数据管道、平台服务及参考实现
- 为团队提供技术指导,并在 ETL/ELT 流程、数据工程标准和平台能力方面进行指导与培养
- 实施数据治理、数据目录和质量监控,以维护可靠且文档完善的数据集
- 与数据架构师、数据科学家、分析师及业务团队合作,将需求转化为可扩展的技术解决方案
- 推动数据平台、开发标准和卓越运营的持续改进
任职要求
- 具有五年以上数据工程和大数据环境的实际工作经验
- 拥有丰富的 Databricks 和 Apache Spark 使用经验,包括 PySpark
- 具有在 Microsoft Azure 上设计和实施数据解决方案的经验
- 具备扎实的 SQL 和 Python 技能,包括整洁代码和面向对象编程原则
- 具有 Azure Event Hubs 和 Kafka 使用经验
- 深入了解维度建模和数据仓库设计原则
- 具有构建可扩展、可靠且易于维护的云原生数据平台的经验
- 具备出色的沟通和利益相关者管理能力
- 能够在不直接负责项目交付的情况下影响并指导团队
- 积极主动、以解决方案为导向,并注重持续改进
- 英语高级水平
- 具备 Databricks Lakehouse 架构、Delta Lake、Unity Catalog、Databricks Workflows、数据治理和 DataOps 经验者优先
- 持有 Databricks 认证(如 Databricks Certified Data Engineer Associate 或 Professional)者优先
福利待遇
- 永久劳动合同
- 远程办公
- 内部培训及认证机会
- 灵活的福利计划,包括医疗保险、交通补贴、托儿券和餐券
- 员工推荐奖励计划,提供现金奖励
- 活动、聚会、技术日和分享会
- 每年 26 天休假:22 天年假、2 天个人假,以及默认休假日 12 月 24 日和 31 日
- 周一至周四 8:30–18:00、周五 8:00–15:00 的弹性工作时间
- 7 月和 8 月实行夏季紧凑工作时间,8:00–15:00
