Модель LATER запоминает ранние наблюдения и точнее прогнозирует толчки

Исследователи описали на arXiv модель LATER, которая прогнозирует последствия действий и помнит ранние наблюдения. Она обращается к этой памяти, когда оценивает возможное действие.
Первое касание объекта может показать его свойства, которых позже не видно, а они влияют на исход следующих действий.
В тесте с помехами успех вырос с 15,5% до 25,0%
Модель мира — это ИИ, который предсказывает, как изменится ситуация после выбранного действия. LATER хранит завершённые шаги взаимодействия в отдельной памяти и опирается на неё, пока перебирает варианты действий.
В тесте Two-Stage PushT два этапа, а наблюдения содержат помехи. Доля итоговых успехов выросла с 15,5% до 25,0% по сравнению с базовой моделью CF-JEPA. Что именно считается успехом, в основе не раскрыто.
Среди шести моделей у LATER самая низкая средняя ошибка при определении физических свойств. Ошибка вдоль толчка при помехах снизилась на 20,2% относительно CF-JEPA.
Опыты с подменой истории показали: прогноз зависит от ранних данных, даже если текущие кадры и действия те же. При толчке эффект сильнее, чем при ожидании.
Что делать
Пока ничего: это научная работа, а готовых продуктов в основе нет.
Чего пока неизвестно
Применение модели в реальных продуктах в основе не упоминается.
Редакция «Применяй ИИ» · Как мы готовим новости




