⌁ Awesome World Model Hub 论文 · 数据集 · 项目
← 返回论文列表

World in World:以世界模型探索世界

arXiv 2026 38.4 method

TLDR

免训练推理时接口,为冻结自回归视频世界模型带来可控相机视角、长视野重访与源视频人体动作迁移。

评分理由

The paper presents a novel unified interface leveraging native self-attention and evidence-aware CFG for controllable video generation, addressing synchronization, completion, and revisiting. However, the abstract lacks visible empirical evaluations or benchmark results, making it difficult to assess demonstrated effectiveness.

Read-first 评分解释

综合优先阅读分 38.4,由主题、引用、图谱、方法、可复现性和近期性等信号加权得到。 原始总分保留为 51。

近期性 5%
100

使用温和的时间衰减,让近期论文更容易浮现,同时保留较早基础工作的价值。 年份:2026

主题相关性 25%
72.9

使用现有 LLM 关键词相关性评分,并归一化到 0-100。 关键词:world model、world simulator、generative world model、interactive world model、video world model、world dynamics prediction、model-based reinforcement learning world model

方法质量 15%
60

检查可见的摘要与分析字段,寻找实验、数据集、基线、指标和局限性等方法证据。 命中信号:评估、指标

可复现性 15%
30

检查链接和可见文本中的论文、代码、数据集、工件与仓库信号。 论文:有;代码:无;数据:无;命中信号:无

图谱声望 15%
10.9

基于可用 OpenAlex 引用关系构建局部引用图,并计算 PageRank 风格的图谱声望。 局部 PageRank:0.0031

引用影响力 15%
0

使用 OpenAlex 形态的引用元数据作为文献关注度信号,并与论文本身质量分开处理。 引用数:0

引用速度 10%
0

引用速度按发表年限估算年均引用,降低旧论文天然占优的偏差。 年均引用:0.00

研究版图角色

前沿论文

排序敏感性

稳定性:volatile;排名波动范围:414。

关键词评分

world model
10
video world model
10
generative world model
9
interactive world model
9
world simulator
7
world dynamics prediction
6
model-based reinforcement learning world model
0

深度分析

创新点

  • 提出 World in World,一种免训练的推理时接口,在不引入任务特定模块或额外训练的情况下,为冻结的因果视频世界模型添加灵活控制。
  • 将异构控制证据转换为带有相机和时间标签的干净视觉状态,并通过冻结因果视频模型的原生自注意力读取。
  • 利用多种带有 token 级支持和可用性调度的证据来源:源视频观测、目标视角场景投影、用于补全新暴露区域的几何渲染,以及超出滚动缓存之外检索到的已生成状态。
  • 提出对应关系路由器,结合持久点身份与几何建立 token 对应关系,将受支持的查询引导至匹配的源视频 token。
  • 引入逐证据注意力分类器自由引导(EWA),利用同一次去噪前向传播中的注意力响应独立调节每个辅助通道的额外贡献。
  • 提供共享控制接口,支持在同一冻结主干上进行相机控制重渲染、长视野重访和人体动作迁移。

方法

该方法是在冻结的自回归因果视频模型之上的免训练推理时接口。它借助对应关系路由器(将持久点身份与几何联系起来)以及逐证据注意力 CFG 机制(调节辅助证据贡献),将异构控制证据转换为通过原生自注意力读取的、带有相机和时间标签的视觉状态。评估聚焦于多种视角变化下的相机控制视频重渲染。

关键结果

论文在多种视角变化下的相机控制视频重渲染上进行了评估,考察感知质量、时间一致性和相机跟随精度。摘要未报告定量指标数值。

技术栈

Autoregressive video world modelsFrozen causal video modelNative self-attentionCorrespondence routerEvidence-wise attention CFG (EWA)

标签