Databricks разрабатывает единую платформу для работы с данными и искусственным интеллектом, предназначенную для организаций, которым необходимо управлять большими массивами данных, создавать системы машинного обучения и превращать аналитику в готовые к использованию приложения. Технологии компании объединяют инженерную работу с данными, обработку в Apache Spark, аналитику и операции машинного обучения, помогая техническим командам работать со всем жизненным циклом данных — от обработки и экспериментов до развертывания и получения аналитических выводов.
Ведущий архитектор решений по генеративному ИИ — Databricks (гибридный формат, Великобритания)
Руководите проектированием готовых к промышленной эксплуатации решений на базе генеративного ИИ и больших языковых моделей на платформе Data + AI от Databricks. Поддерживайте цифровые компании и региональные команды EMEA посредством архитектуры, подтверждения концепций и технического лидерства.
Описание
- Руководите техническим направлением генеративного ИИ, больших языковых моделей и прикладного машинного обучения в подразделении EMEA Emerging DNB.
- Сотрудничайте с архитекторами решений, инженерами по решениям и командами по работе с клиентами, чтобы определять масштаб, проектировать и снижать риски вариантов использования генеративного ИИ.
- Создавайте подтверждения концепций и эталонные архитектуры для крупномасштабных нагрузок больших языковых моделей и глубокого обучения на Databricks.
- Руководите проектами, связанными с дообучением открытых больших языковых моделей, настройкой моделей и методами оценки.
- Передавайте сведения о клиентах и работе полевых команд в планы развития продуктов и инженерных решений, а затем сообщайте направление развития полевым командам.
- Развивайте организацию Field Engineering подразделения EMEA Emerging DNB с помощью семинаров, эталонных архитектур и внутреннего обучения.
- Представляйте Databricks на конференциях, в технических статьях и на брифингах для руководителей клиентов.
Требования
- Подтверждённое понимание проприетарных и открытых больших языковых моделей, включая их возможности, компромиссы и пригодность для различных вариантов использования.
- Продвинутая экспертиза в RAG, агентах, использовании инструментов, дообучении, настройке моделей, разработке промптов, разработке систем оценки и средствах обеспечения безопасности больших языковых моделей.
- Глубокие знания машинного и глубокого обучения, включая распределённое обучение, нагрузки на GPU и полный жизненный цикл MLOps.
- Уверенное владение Python, PyTorch или Transformers, MLflow и Spark.
- Опыт работы с Databricks или способность быстро освоить Mosaic AI, Model Serving, Vector Search и Unity Catalog.
- Опыт работы с AWS, Azure или Google Cloud Platform.
- Отличные коммуникативные и консультационные навыки.
- Подтверждённый опыт технического лидерства и наставничества.
- Способность эффективно работать в темпе цифровых компаний и быстрорастущих клиентов.
- Проживание в Великобритании и готовность работать в часовых поясах EMEA.
- Готовность при необходимости посещать площадки клиентов в регионе.
- Опыт помощи цифровым компаниям в разработке решений для работы с данными и машинного обучения будет преимуществом.
Преимущества
- Комплексный пакет льгот и преимуществ для сотрудников; информация с учётом региона предоставляется в документации о льготах.
- Возможность сформировать публичную репутацию признанного эксперта по генеративному ИИ.
- Возможности выступать на конференциях, публиковать материалы в блогах и проводить брифинги для руководителей клиентов.
- Возможности для технического лидерства и внешнего представительства.