StreamEval: лучшие потоковые нейросети выполняют лишь 15% правок по референсу
Исследователи из Tsinghua, NVIDIA и других лабораторий представили бенчмарк StreamEval для оценки нейросетей, генерирующих видео в реальном времени. В тесте из 300 сценариев 37 моделей показали, что стабильно держат картинку, но плохо справляются с командами пользователя: лидер среди аватаров выполнил действия лишь в 36,9% случаев, а лучшее редактирование по референсу достигло только 15% успеха.
https://aivolna.com/lenta/319
Исследователи из Tsinghua, NVIDIA и других лабораторий представили бенчмарк StreamEval для оценки нейросетей, генерирующих видео в реальном времени. В тесте из 300 сценариев 37 моделей показали, что стабильно держат картинку, но плохо справляются с командами пользователя: лидер среди аватаров выполнил действия лишь в 36,9% случаев, а лучшее редактирование по референсу достигло только 15% успеха.
https://aivolna.com/lenta/319