中高级数据工程师,美国远程办公 - Cognyte
构建可扩展的数据管道和分布式平台,为 Cognyte 的犯罪、恐怖主义和安全情报解决方案提供支持。 在云端、Kubernetes、混合云和本地环境中开展工作。
描述
- 创建和维护用于数据摄取、转换和丰富的大规模管道。
- 使用 Java、Python、Kafka 及相关技术开发和运营分布式数据服务。
- 设计具备可扩展性、弹性和高性能的数据平台。
- 为分析、搜索、图谱和运营用例构建并优化数据模型。
- 在 Kubernetes 环境中部署和管理应用程序。
- 使用 AWS 和/或 GCP 服务,同时支持混合云和本地部署。
- 与客户、集成团队和解决方案架构师合作,推动项目成功实施。
- 监控、诊断并改进平台的性能、可靠性和可扩展性。
- 支持基础设施自动化、CI/CD 及更广泛的平台工程工作。
- 根据客户合作、研讨会和部署需求,进行国内及国际出差。
任职要求
- 至少五年数据工程、软件工程或平台工程经验。
- 具备扎实的 Java 和/或 Python 编程能力。
- 具备 Kubernetes 和基于 Docker 的容器化应用实践经验。
- 具备 AWS、GCP 或其他公有云平台使用经验。
- 具备支持或运营混合云和本地环境的经验。
- 熟悉分布式系统和多线程应用程序。
- 具备 SQL 和 NoSQL 数据库经验。
- 具备构建和运营生产级数据管道的经验。
- 具备出色的问题排查和运营能力。
- 具备清晰的沟通能力和有效的协作能力。
- 具备设计和运营多集群 Kubernetes 环境的经验。
- 具备在高度监管或物理隔离的本地环境中运行数据平台的经验。
- 了解网络、安全和云基础设施最佳实践。
- 具备直接与面向客户的工程团队合作的经验。
福利待遇
- 客户合作、研讨会和部署可能需要国内及国际出差。
