Zoox разрабатывает технологии автономной мобильности и специально созданный автопарк для мобильности как услуги. Компания объединяет робототехнику, искусственный интеллект, автомобилестроение, электромобили и передовые системы восприятия, чтобы создавать транспорт, который делает поездки безопаснее, экологичнее и приятнее. Zoox стремится изменить представление людей о персональной мобильности с помощью полностью автономных автомобилей, созданных с учётом потребностей пассажиров.
Студент-инженер по валидации и бенчмаркингу ИИ (контракт)
Оценивайте точность ИИ-агентов и создавайте наборы данных для бенчмаркинга. Поддерживайте разработку автономных роботакси Zoox с помощью инструментов на Python и анализа.
Описание
- Вносить вклад в полный цикл валидации инструментов ИИ.
- Поддерживать наборы тестовых данных.
- Запускать бенчмарки и анализировать результаты, выявляя ошибки маршрутизации и регрессии в разных версиях агентов.
- Создавать и расширять наборы эталонных данных, чтобы сравнивать результаты агентов с проверенными ответами.
- Выявлять пробелы в проверке бенчмарков и помогать укреплять инфраструктуру оценки.
- Определять критерии оценки, включая точность меток и корректность структурированного вывода.
- Исследовать сбои в результатах агентов и совместно с инженерами находить практические улучшения.
- Создавать скрипты и инструменты для автоматизации сбора данных, разбора результатов и формирования отчетов по метрикам.
- Документировать выводы, отслеживать тенденции бенчмарков и делиться результатами с командой.
- Сотрудничать с инженерами и исследователями, разрабатывающими автономные технологии.
Требования
- Обучаться в настоящее время по программе бакалавриата или магистратуры в области компьютерных наук, науки о данных, инженерии или смежной дисциплине.
- Быть доступным для работы по назначению не менее трех месяцев.
- Иметь возможность работать не менее 20 часов в неделю.
- Иметь возможность работать в офисе компании.
- Соблюдать правила Zoox о конфиденциальности, в том числе не использовать и не передавать за пределами Zoox служебную информацию компании для академических исследований, дипломных работ, публикаций или презентаций.
- Иметь опыт работы с Cursor или Claude.
- Иметь опыт работы с Python.
- Понимать такие критерии оценки, как точность, полнота, F1-мера и матрицы ошибок.
- Уверенно работать со структурированными форматами данных, такими как CSV и JSON.
- Иметь опыт написания или изменения воспроизводимых аналитических скриптов.
- Иметь опыт работы с системами на базе больших языковых моделей, промпт-инжинирингом или оценкой ИИ-агентов.
- Иметь опыт работы с Jira или Slack, например с инструментами для отслеживания задач или обмена сообщениями.
Преимущества
- Постоянная значимая работа, которую можно совмещать с учебой.
- Возможности учиться и развивать новые навыки.
- Практический опыт в профессиональной среде.
- Право на льготы определяется поставщиком услуг.