Booz Allen Hamilton
Booz Allen Hamilton
Booz Allen Hamilton — консалтингова компанія у сфері управління та технологій, яка надає державним і комерційним клієнтам передові технічні та стратегічні компетенції. Компанія працює у сферах національної безпеки, оборони, розвідки, цивільного управління та критично важливої інфраструктури, об’єднуючи команди, зосереджені на штучному інтелекті, кібербезпеці, хмарних обчисленнях, цифровій трансформації, інженерії, а також підтримці виконання завдань і операційної діяльності. Компанія особливо активно працює над комплексними завданнями з високими вимогами до надійності для військових, розвідувальних і федеральних установ, а також окремих комерційних секторів.

Інженер даних RAG у Booz Allen Hamilton — Аннаполіс-Джанкшн, Меріленд

Створюйте інфраструктуру завантаження даних і пошуку для корпоративних ШІ-застосунків Booz Allen. Розробляйте процеси створення ембедингів в Amazon Bedrock і пошуку в OpenSearch.

Опис

  • Створюйте й підтримуйте системи завантаження даних і пошуку для критично важливих застосунків генерації з доповненням пошуковою інформацією (RAG).
  • Створюйте й підтримуйте конвеєри підготовки структурованих і неструктурованих даних для пошуку.
  • Керуйте процесами завантаження даних, створення ембедингів та індексування, що з’єднують корпоративні джерела даних з Amazon Bedrock і OpenSearch.
  • Нормалізуйте документи й розбивайте їх на фрагменти, створюйте ембединги, доповнюйте метадані, відстежуйте походження даних і забезпечуйте надійне додавання, оновлення та видалення записів.
  • Проєктуйте й налаштовуйте індекси OpenSearch, схеми відображень, параметри шардирования, політики життєвого циклу та продуктивність запитів.
  • Співпрацюйте з командами хмарної інфраструктури, безпеки, розробки застосунків та ШІ/МО, щоб створювати масштабовану, безпечну й надійну інфраструктуру пошуку.
  • Допомагайте розробляти й розгортати корпоративні застосунки RAG.

Вимоги

  • Досвід створення та підтримки ETL-конвеєрів або конвеєрів завантаження структурованих і неструктурованих даних.
  • Досвід підготовки документів: нормалізації, розбору, поділу на фрагменти, обробки вмісту та створення ембедингів.
  • Досвід проєктування й підтримки індексів, схем, відображень і псевдонімів OpenSearch або Elasticsearch, а також підвищення продуктивності пошуку.
  • Досвід створення ідемпотентних процесів завантаження даних із підтримкою додавання й оновлення записів, видалення, повторного виконання та відновлення після збоїв.
  • Досвід моделювання й збагачення метаданих, відстеження походження даних і версій.
  • Досвід використання Python або іншої мови програмування для інженерії даних та автоматизації.
  • Досвід роботи з контейнеризованими застосунками або середовищами розгортання, як-от Docker, ECS, EKS чи Kubernetes.
  • Здатність працювати з командами розробки, безпеки, хмарної інфраструктури та розробки застосунків.
  • Потрібен чинний допуск TS/SCI.
  • Потрібен атестат про повну загальну середню освіту або еквівалент GED.
  • Бажано: досвід інтеграції ембедингів Amazon Bedrock у конвеєри завантаження даних RAG.
  • Бажано: досвід налаштування гібридного пошуку, що поєднує пошук за ключовими словами BM25 із векторним пошуком за схожістю.
  • Бажано: досвід роботи з політиками життєвого циклу OpenSearch, знімками, відновленням і стратегіями міграції індексів.
  • Бажано: досвід роботи з інструментами розподіленої або асинхронної обробки, такими як Spark, Ray, Dask, Kafka чи Amazon SQS.
  • Бажано: досвід використання результатів оцінювання пошуку для налаштування поділу документів на фрагменти, ембедингів та індексування.
  • Бажано: досвід завантаження даних із кількох джерел і їх нормалізації між джерелами.
  • Бажано: досвід проєктування масштабованої та безпечної інфраструктури даних із використанням сервісів AWS.
  • Бажано: досвід роботи з інструментами інфраструктури як коду, такими як Terraform, CloudFormation чи AWS CDK.

Переваги

  • Медичне страхування
  • Страхування життя
  • Страхування на випадок інвалідності
  • Фінансові пільги
  • Пенсійні пільги
  • Оплачувана відпустка
  • Можливості професійного розвитку
  • Допомога з оплатою навчання
  • Програми підтримки балансу між роботою та особистим життям
  • Підтримка догляду за утриманцями
  • Програма заохочувальних нагород
  • Перевірка особи для запобігання шахрайству
  • Під час співбесід, оцінювань і віртуальних зустрічей потрібно тримати камеру ввімкненою.

Схожі вакансії

Walmart

Старший менеджер з інженерії даних — ланцюг постачання Walmart

Walmart

Керуйте інженерією даних та аналітикою ланцюга постачання Walmart: масштабованими конвеєрами, управлінням даними, моделями й автоматизацією на хмарних платформах і платформах великих даних.

Відкрити
Walmart

Інженер даних III

Walmart

Створюйте масштабовані хмарні конвеєри даних і ETL-системи у Walmart. Забезпечуйте контрольовані та якісні дані для аналітики й бізнес-рішень.

Відкрити