DecMem:面向分钟级一致世界生成的解耦记忆
TLDR
提出DecMem,一种解耦记忆架构,用于生成分钟级一致视频,实现细粒度时空一致性。
评分理由
The paper introduces a novel decoupled memory approach to address long-horizon consistency in video generation, which is a strength. However, the abstract lacks specific quantitative results or dataset details, and the focus is narrow (video generation) without addressing interactive or RL settings.
Read-first 评分解释
综合优先阅读分 53.2,由主题、引用、图谱、方法、可复现性和近期性等信号加权得到。 原始总分保留为 37。
研究版图角色
基础论文前沿论文桥接论文
排序敏感性
稳定性:volatile;排名波动范围:378。
关键词评分
深度分析
创新点
- 解耦记忆架构,包含稀疏全局记忆(Sparse Global Memory)以实现对全局历史的高效细粒度访问,以及锚定局部记忆(Anchored Local Memory)以实现稳定高质量的外推。
- 识别并系统分析了注意力分散(attention dispersion)作为朴素可学习记忆架构在长程外推中的根本局限性。
- 提出细粒度、可学习、可扩展的记忆用于一致世界生成,超越了显式3D记忆和粗粒度帧级隐式建模。
方法
本文提出DecMem,一种解耦记忆架构,采用稀疏全局记忆(Sparse Global Memory)实现对全局历史的高效细粒度访问,以及锚定局部记忆(Anchored Local Memory)实现稳定高质量的外推。它解决了朴素可学习记忆的两个根本局限性:计算效率低下和注意力分散。该模型在长视频生成任务上进行了评估,并与当前最先进方法进行了比较。
关键结果
DecMem显著优于当前最先进方法,实现了分钟级可控长视频生成,具有高保真度和一致性。