远程大数据基础设施工程师
负责国际化平台的大数据基础设施，涵盖 HDFS、对象存储和 Iceberg。 规划平台架构、配额、目录、监控及运维可靠性。
描述
- 负责国际化平台的大数据基础设施，并担任技术负责人。
- 部署、升级和运维 HDFS、兼容 S3 的 Apache Ozone 存储及 Iceberg 等核心服务。
- 支持一项试点，将少量超大型数据集转换为数千张小表。
- 为各业务部门设置计算和存储配额。
- 将默认的 Iceberg 目录迁移到功能更完善的方案，例如 Lakekeeper 或 Gravitino。
- 重新设计监控和告警，让通知更具可操作性。
- 与在平行环境中运维相同技术栈的工程师密切合作，共享解决方案并相互支持。
- 参与架构决策，并用当前平台版本替换过时工具。
任职要求
- 至少五年设计、部署和运维大数据平台的经验。
- 具备部署、升级和排查 HDFS 或 Hadoop 问题的实践经验。
- 具备部署和运维兼容 S3 的对象存储的实践经验；优先考虑 Apache Ozone，也接受 MinIO 或类似工具。
- 具备 Apache Iceberg 相关经验。
- 具备为数据基础设施实施监控和告警的经验。
- 英语达到 B2 水平。
- 能够在 GMT+3 时区工作，时差不超过三小时。
- 优先条件：具备 Trino、Kafka 或 Flink 相关经验。
- 优先条件：具备实施 Iceberg REST 目录的经验，例如 Lakekeeper、Gravitino、Polaris 或类似方案。
- 优先条件：具备为多租户数据平台实施资源配额和成本分摊的经验。
- 优先条件：实际使用 Copilot 或智能体等 AI 工具提升工作效率。
福利待遇
- 工作时间灵活，并可选择远程办公。
- 积极互助、重视协作与共同成长的团队。
- 完善的入职培训、个人发展计划，以及定期举办的团队讲座和演示。
- 提供入职培训、技能培训、软技能提升和领导力发展的内部项目。
- 部分报销外部培训和会议参与费用。
- 提供企业英语课程，包括集体课、一对一课程，以及与全球同事参加的会话俱乐部。
- 酒店和旅行服务企业优惠价。
- MyTime Day Off：额外一天带薪休假。