
Booz Allen Hamilton RAG 数据工程师 — 马里兰州安纳波利斯章克申
为 Booz Allen 的企业级 AI 应用构建数据摄取与搜索基础设施。 开发 Amazon Bedrock 嵌入和 OpenSearch 检索工作流。
描述
- 构建并运维支持关键任务型检索增强生成的数据摄取与搜索系统。
- 创建并维护用于处理结构化和非结构化检索数据的管道。
- 管理数据摄取、嵌入和索引工作流,将企业数据源连接至 Amazon Bedrock 和 OpenSearch。
- 规范化并切分文档、生成嵌入、丰富元数据、跟踪数据沿袭,并可靠地处理更新和删除。
- 设计和调优 OpenSearch 索引、映射、分片设置、生命周期策略及查询性能。
- 与云、安全、应用开发和 AI/ML 团队合作,构建可扩展、安全且具备韧性的检索基础设施。
- 协助开发和部署企业级 RAG 应用。
任职要求
- 具备构建和维护结构化或非结构化数据 ETL 或摄取管道的经验。
- 具备通过规范化、解析、切分、内容处理和嵌入生成来处理文档的经验。
- 具备设计和维护 OpenSearch 或 Elasticsearch 索引、架构、映射及别名,并提升搜索性能的经验。
- 具备构建幂等数据摄取流程的经验,支持更新、删除、重放和故障恢复。
- 具备元数据建模、丰富、数据沿袭及版本跟踪经验。
- 具备使用 Python 或其他编程语言进行数据工程和自动化的经验。
- 具备容器化应用或部署环境的经验,例如 Docker、ECS、EKS 或 Kubernetes。
- 能够与工程、安全、云及应用开发团队协作。
- 必须持有有效的 TS/SCI 安全许可。
- 必须具备高中毕业证书或 GED 同等学历。
- 优先条件:具备将 Amazon Bedrock 嵌入集成到 RAG 数据摄取管道的经验。
- 优先条件:具备调优结合 BM25 关键词搜索与向量相似度搜索的混合检索的经验。
- 优先条件:具备 OpenSearch 生命周期策略、快照、恢复及索引迁移策略的经验。
- 优先条件:具备使用 Spark、Ray、Dask、Kafka 或 Amazon SQS 等分布式或异步处理工具的经验。
- 优先条件:具备利用检索评估结果来调优文档切分、嵌入和索引的经验。
- 优先条件:具备从多个来源摄取数据并进行跨来源规范化的经验。
- 优先条件:具备使用 AWS 服务设计可扩展且安全的数据基础设施的经验。
- 优先条件:具备使用 Terraform、CloudFormation 或 AWS CDK 等基础设施即代码工具的经验。
福利待遇
- 医疗保险
- 人寿保险
- 残障保障
- 财务福利
- 退休福利
- 带薪假期
- 专业发展机会
- 学费补助
- 工作与生活项目
- 受抚养人照护支持
- 表彰奖励计划
- 用于帮助防范欺诈的身份验证
- 面试、评估和虚拟会议期间须开启摄像头参与。
