跳到正文
HuggingFace Daily Papers· Shengqiong Wu, Meng Luo, Bobo Li, Ziwei Liu, Shuicheng Yan, Ming-Hsuan Yang, Philip Torr, Hao Fei·· 4 天前AI 评分35

视频:通过阅读、写作、共享与交互理解世界

Reading, Writing, Sharing, and Interacting with the World through Video

AI 导读

这篇综述以世界建模为统一框架,分析视频基础模型与视频世界模型的关系,提出四种互补操作:从视频中推断世界属性、根据世界条件合成视频、通过共享建模机制整合理解与生成、在动作与观测下预测和更新世界状态。研究强调从片段级识别向持久状态、可控演化及物理因果有效性的转变,并指出当前面临的开放挑战。

来源:HuggingFace Daily Papers · arxiv.org