Awesome World Model Hub 论文 · 数据集 · 项目
← 返回论文列表

学习世界模型的潜在动态鲁棒表示

ICML 24 2024 59.3 method

TLDR

通过时空掩码、双模拟和HRSSM学习鲁棒表示,提升视觉MBRL世界模型在复杂视觉控制任务上的性能。

评分理由

The paper presents a novel combination of spatio-temporal masking, bisimulation, and a hybrid recurrent state-space model to address exogenous noise in visual MBRL. Strengths include clear problem motivation and empirical gains on challenging tasks with real-world distractors. Weaknesses are the narrow focus on specific control tasks and lack of broader theoretical analysis or comparison to other robust representation methods.

Read-first 评分解释

综合优先阅读分 59.3,由主题、引用、图谱、方法、可复现性和近期性等信号加权得到。 原始总分保留为 34。

可复现性 25%
81

检查链接和可见文本中的论文、代码、数据集、工件与仓库信号。 论文:有;代码:有;数据:无;命中信号:代码、GitHub

近期性 8%
75.1

使用温和的时间衰减,让近期论文更容易浮现,同时保留较早基础工作的价值。 年份:2024

方法质量 25%
50

检查可见的摘要与分析字段,寻找实验、数据集、基线、指标和局限性等方法证据。 命中信号:评估

主题相关性 42%
48.6

使用现有 LLM 关键词相关性评分,并归一化到 0-100。 关键词:world model、world simulator、generative world model、interactive world model、video world model、world dynamics prediction、model-based reinforcement learning world model

研究版图角色

复现锚点

排序敏感性

稳定性:volatile;排名波动范围:256。

关键词评分

world model
10
model-based reinforcement learning world model
9
world dynamics prediction
8
world simulator
3
generative world model
2
interactive world model
1
video world model
1

深度分析

创新点

  • 结合时空掩码策略、双模拟原理和潜在重构,捕获内源性任务特定特征并过滤外源性噪声
  • 混合循环状态空间模型(HRSSM)以解决表示、动态和策略联合训练中的不稳定性

方法

本文提出了一种基于视觉的模型强化学习方法,应用时空掩码策略和双模拟原理,结合潜在重构,学习忽略外源性噪声的鲁棒表示。引入混合循环状态空间模型(HRSSM)结构以稳定表示、动态和策略的联合训练。该方法在来自Matterport环境的外源性干扰的Maniskill复杂视觉控制任务上进行了评估。

关键结果

实证评估表明,在具有外源性干扰的复杂视觉控制任务中,该方法相比现有方法(包括Dreamer)取得了显著的性能提升。

技术栈

DreamerHRSSMManiskillMatterportSpatio-temporal maskingBisimulationLatent reconstruction

标签