高级大数据工程师 – 马耳他混合办公
以高级工程师身份,负责 Gaming Innovation Group 实时大数据项目的设计与交付。构建可靠的 ETL 流程和高性能服务,同时提升数据质量、生产运营和技术应用。
描述
- 负责重大实时大数据项目的分析、设计、开发和支持
- 通过全面的代码审查提升团队交付能力
- 倡导工程最佳实践,为各项大数据计划交付具备韧性的解决方案
- 设计、构建和维护 ETL 工作流、数据集成及处理管道
- 高效处理和管理超大规模数据
- 开发用于处理、存储和分析大型数据集的优化型高性能服务
- 建立数据验证和质量控制机制,保障准确性与可靠性
- 诊断并解决线上生产系统中的问题
- 评估、测试并引入支持当前及未来项目的技术
任职要求
- 精通 Spark、Kafka、NiFi、ClickHouse 和大规模数据存储等大数据技术
- 深入了解模式设计方法和数据建模
- 熟练使用 SQL 提取大型数据集
- 熟悉 SQL 数据库
- 具备面向对象编程经验,最好使用 Python 和/或 Java
- 拥有丰富的云计算和/或分布式系统经验
福利待遇
- 良好的职业发展机会
- 混合办公安排
- 国际医疗保险
- 每年 350 欧元的健康与福祉津贴
- 生日当天带薪休假
- 每年额外一天个人休假
