Ученые МФТИ разработали метод, позволяющий большим языковым моделям анализировать проис...
Ученые МФТИ разработали метод, позволяющий большим языковым моделям анализировать происходящее на видео, отслеживать движение объектов и их взаимодействие и прогнозировать последующие действия. Технология даст возможность экономить вычислительные ресурсы и может быть востребована для анализа окружающей обстановки роботами. Ученые протестировали алгоритм на роботе Husky — это мобильная платформа с рукой манипулятором. Роботу ставились задачи на русском языке уровня «подъехать к столу и взять предмет» — машина выполняла их, анализируя входящее с камер видео в реальном времени: установленные на нем вычислительные мощности позволили обрабатывать один запрос в секунду, чего хватило для решения базовых задач. Эксперимент показал, что система справляется даже при наличии шумов и неточностей. Фото: whitehoune / ru.123rf.com Подробнее на портале Научная Россия #ии #мфти