捷克远程高级大数据架构师
作为高级大数据架构师,使用 Cloudera、Kafka 和 AWS 为银行客户负责企业级数据平台。工作涵盖流处理、集成、治理和架构标准。
描述
- 负责大规模分布式数据、流处理和集成解决方案的端到端架构
- 负责分布式数据、集成和平台解决方案的架构设计
- 为各项计划提供架构指导、治理、设计保障和技术领导
- 根据企业技术战略、工程标准和平台长期目标持续演进目标架构
- 负责 AWS 上 Cloudera CDP 企业数据湖、运营数据存储及相关服务的架构
- 基于 Cloudera、Kafka、API 和云平台设计并记录可扩展的分布式数据与流处理解决方案
- 定义数据摄取、处理、存储和消费模式
- 在解决方案交付全流程中提供架构监督
- 与工程团队合作,确保解决方案可交付、可扩展、安全、易于支持,并符合企业原则
- 审查工程团队制定的技术设计
- 评估技术风险、依赖关系、假设、非功能性需求和设计权衡
- 通过将解决方案拆分为增量版本和迭代成果来支持交付规划
- 向架构评审委员会和治理论坛展示解决方案设计
- 与业务利益相关者、交付团队和企业架构师协作
- 在整个数据平台生态系统中制定并推广架构模式、工程标准和最佳实践
任职要求
- 拥有至少 10 年 IT 工作经验,其中包括丰富的数据平台、集成或分布式系统交付经验
- 具备使用 Kafka 或同类事件流技术设计流式或实时数据应用的经验
- 了解 Kafka 消费者架构,包括消费者组、偏移量、重试、死信处理、顺序、分区和可扩展性
- 具备在 Cloudera CDH/CDP 或同等企业级分布式数据平台上设计解决方案的经验
- 具备设计和交付大规模数据摄取、转换、存储和消费模式的经验
- 了解批处理和实时数据处理架构
- 曾在复杂企业环境中工作,涉及多个系统、供应商、平台和治理流程
- 了解性能、可扩展性、弹性、安全性、可观测性和运营支持等非功能性问题
- 曾在多个工作流、项目或交付团队中担任架构领导
- 曾指导架构师、高级工程师或技术负责人,并影响技术决策
- 精通 Cloudera CDH/CDP 或同等技术上的分布式数据平台和数据湖架构
- 精通事件流和实时集成,包括 Kafka 及相关消息模式
- 熟悉 Spark、Flink、Hive、Impala 或同等技术等大规模处理和转换框架
- 具备 Java、Spring Boot 和 REST 服务经验
- 熟悉 HBase、Cassandra 或同等平台等 NoSQL 和分布式存储技术
- 具备云服务经验,最好是 AWS
- 了解 DevOps、CI/CD、可观测性和弹性
福利待遇
- 长期合同,采用远程优先的工作模式
- 面向欧盟境内候选人的远程工作机会
- 合同持续至 2026 年 12 月,并可能延长至 2027 年
