高级数据工程师 – Azure 与 Databricks(混合办公,雅典)
负责构建可扩展的 Azure 和 Databricks 数据管道及 Lakehouse 数据产品的高级数据工程师。该职位专注于 inventYOU 的数据质量、治理、安全性和性能。
描述
- 使用 Azure Data Factory 和 Azure Databricks 设计并维护生产数据管道
- 构建并优化 Azure SQL、Data Lake 和 Lakehouse 解决方案
- 创建可复用的数据产品和数据模型
- 建立数据质量控制、监控和运营支持机制
- 使用 PySpark 和 Spark SQL 开发并改进数据解决方案
- 在数据工程解决方案中使用 Delta Lake 和 Unity Catalog
- 落实安全性、访问控制、治理和性能实践
- 与分析、架构、治理、安全和工程团队协作
- 通过 Git、DevOps、自动化测试和 CI/CD 支持交付
任职要求
- 至少五年相关专业工作经验
- 具备丰富的 Azure Data Factory 实操经验
- 具备丰富的 Azure Databricks 实操经验
- 具备 Azure SQL 专业工作经验
- 精通 PySpark 和 Spark SQL
- 具备 Delta Lake 使用经验
- 具备较强的数据建模能力
- 具备数据质量管理经验
- 具备敏捷环境工作经验
- 具备 Git、DevOps 和 CI/CD 管道的实际经验
- 具备希腊语和英语的专业工作能力
- 具备 Power BI 使用经验
- 具备 Collibra 和 Soda 使用经验
- 具备 Delta Live Tables 及相关 Lakehouse 工具使用经验
- 具备 Delta Live Tables 使用经验
福利待遇
- 使用 Azure、Databricks、PySpark 和现代 Lakehouse 技术开展工作
- 创建企业级数据解决方案和可复用的数据产品
- 与经验丰富的数据和技术专业人士协作
- 持续提升现代云数据工程领域的专业能力
