Команда Google представила StreamVibe и показала ограничения видеопомощников

Исследователи Google и университетов представили StreamVibe — систему, которая анализирует видео и выбирает момент для помощи человеку. Вместо одной точной команды она должна учитывать расплывчатые цели, выполненные шаги и смену запроса в процессе работы.

Для оценки команда собрала около 4100 примеров из более чем 183 часов записей. Испытания выявили существенное ограничение: при непрерывном просмотре ошибки накапливаются у всех проверенных моделей. На видео длиннее пяти минут им редко удаётся вовремя вмешаться. Исследование не устанавливает экономию затрат или коммерческую отдачу такого подхода.

Разбираем устройство StreamVibe и ограничения сопровождения длительных задач: https://ai-digest.ru/go/finbazar/4548/