World Model Action-Aware Memory Object Interaction Video Generation
摘要

交互式世界模型旨在模拟实时用户动作下的环境动态,但现有研究多局限于导航动作,缺乏物体交互能力。本文提出 ActWorld,一种支持中途物体交互的交互式世界模型。针对数据稀缺与记忆瓶颈(即近期偏差导致因果帧丢失引发的动作遗忘),我们构建了包含链式思维标注的 10 万条人机交互视频数据集,并设计了分层动作感知记忆机制。该机制依据交互重要性路由历史压缩,辅以持久记忆库维护事件更新与对象身份令牌。实验表明,ActWorld 在单一模型中实现了灵活导航与丰富交互,显著提升了交互保真度。

AI 推荐理由

论文提出动作感知记忆架构,核心解决世界模型中的动作遗忘与历史压缩瓶颈。

研究机构
Washington University in St. Louis Intelligent Creation, ByteDance
论文信息
作者 Zhexiao Xiong, Yizhi Song, Hao Kang, Qing Yan, Liming Jiang et al.
发布日期 2026-06-16
arXiv ID 2606.17730
相关性评分 9/10 (高度相关)