Booz Allen Hamilton
Booz Allen Hamilton
Booz Allen Hamilton — консалтинговая компания в сфере управления и технологий, которая предоставляет государственным и коммерческим клиентам передовые технические и стратегические знания. Компания работает в таких областях, как национальная безопасность, оборона, разведка, гражданское управление и критически важная инфраструктура, объединяя команды, специализирующиеся на искусственном интеллекте, кибербезопасности, облачных вычислениях, цифровой трансформации, инженерных решениях, а также поддержке выполнения задач и операционной деятельности. Особое внимание компания уделяет сложным задачам с высокими требованиями к надежности для военных, разведывательных и федеральных ведомств, а также отдельных коммерческих отраслей.

Инженер данных RAG в Booz Allen Hamilton — Аннаполис-Джанкшен, Мэриленд

Создавайте инфраструктуру загрузки данных и поиска для корпоративных ИИ-приложений Booz Allen. Разрабатывайте процессы генерации эмбеддингов в Amazon Bedrock и поиска в OpenSearch.

Описание

  • Создавайте и эксплуатируйте системы загрузки данных и поиска для критически важных приложений генерации с дополненной извлечением информацией (RAG).
  • Создавайте и поддерживайте конвейеры подготовки структурированных и неструктурированных данных для поиска.
  • Управляйте процессами загрузки данных, генерации эмбеддингов и индексирования, связывающими корпоративные источники данных с Amazon Bedrock и OpenSearch.
  • Нормализуйте документы и разбивайте их на фрагменты, генерируйте эмбеддинги, дополняйте метаданные, отслеживайте происхождение данных и обеспечивайте надежное добавление, обновление и удаление записей.
  • Проектируйте и настраивайте индексы OpenSearch, схемы отображения, параметры шардирования, политики жизненного цикла и производительность запросов.
  • Сотрудничайте с командами облачной инфраструктуры, безопасности, разработки приложений и ИИ/МО для создания масштабируемой, безопасной и отказоустойчивой инфраструктуры поиска.
  • Участвуйте в разработке и развертывании корпоративных приложений RAG.

Требования

  • Опыт создания и сопровождения ETL-конвейеров или конвейеров загрузки структурированных и неструктурированных данных.
  • Опыт подготовки документов: нормализации, разбора, разбиения на фрагменты, обработки содержимого и генерации эмбеддингов.
  • Опыт проектирования и сопровождения индексов, схем, отображений и псевдонимов OpenSearch или Elasticsearch, а также повышения производительности поиска.
  • Опыт создания идемпотентных процессов загрузки данных с поддержкой добавления и обновления записей, удаления, повторного выполнения и восстановления после сбоев.
  • Опыт моделирования и обогащения метаданных, отслеживания происхождения данных и версий.
  • Опыт использования Python или другого языка программирования для инженерии данных и автоматизации.
  • Опыт работы с контейнеризированными приложениями или средами развертывания, такими как Docker, ECS, EKS или Kubernetes.
  • Способность работать с командами разработки, безопасности, облачной инфраструктуры и разработки приложений.
  • Требуется действующий допуск TS/SCI.
  • Требуется аттестат о среднем образовании или его эквивалент GED.
  • Будет преимуществом: опыт интеграции эмбеддингов Amazon Bedrock в конвейеры загрузки данных RAG.
  • Будет преимуществом: опыт настройки гибридного поиска, сочетающего поиск по ключевым словам BM25 с векторным поиском по сходству.
  • Будет преимуществом: опыт работы с политиками жизненного цикла OpenSearch, снимками, восстановлением и стратегиями миграции индексов.
  • Будет преимуществом: опыт работы с инструментами распределенной или асинхронной обработки, такими как Spark, Ray, Dask, Kafka или Amazon SQS.
  • Будет преимуществом: опыт использования результатов оценки поиска для настройки разбиения документов на фрагменты, эмбеддингов и индексирования.
  • Будет преимуществом: опыт загрузки данных из нескольких источников и их нормализации между источниками.
  • Будет преимуществом: опыт проектирования масштабируемой и безопасной инфраструктуры данных с использованием сервисов AWS.
  • Будет преимуществом: опыт работы с инструментами инфраструктуры как кода, такими как Terraform, CloudFormation или AWS CDK.

Преимущества

  • Медицинское страхование
  • Страхование жизни
  • Страхование на случай инвалидности
  • Финансовые льготы
  • Пенсионные льготы
  • Оплачиваемый отпуск
  • Возможности профессионального развития
  • Помощь в оплате обучения
  • Программы поддержки баланса между работой и личной жизнью
  • Поддержка по уходу за иждивенцами
  • Программа поощрительных наград
  • Проверка личности для предотвращения мошенничества
  • Во время собеседований, оценок и виртуальных встреч необходимо держать камеру включенной.

Похожие вакансии

Walmart

Старший менеджер по инженерии данных — цепочка поставок Walmart

Walmart

Руководите инженерией данных и аналитикой цепочки поставок Walmart: масштабируемыми конвейерами, управлением данными, моделями и автоматизацией на облачных платформах и платформах больших данных.

Открыть
Walmart

Инженер данных III

Walmart

Создавайте масштабируемые облачные конвейеры данных и ETL-системы в Walmart. Обеспечивайте управляемые и качественные данные для аналитики и бизнес-решений.

Открыть