Awesome World Model Hub 论文 · 数据集 · 项目
← 返回论文列表

VL-SAFE: 视觉语言引导的基于世界模型的安全感知强化学习用于自动驾驶

arXiv 25.5 2025 62.9 method, application

TLDR

提出VLM-SAFE框架,融合视觉语言模型与世界模型,实现语义安全感知的离线强化学习自动驾驶。

评分理由

Strengths include novel integration of VLM for semantic safety signals with world model for imagination, addressing sample efficiency and safety. Weaknesses: abstract lacks details on experimental validation and real-world performance; reliance on offline data may limit generalization.

Read-first 评分解释

综合优先阅读分 62.9,由主题、引用、图谱、方法、可复现性和近期性等信号加权得到。 原始总分保留为 44。

近期性 8%
86.7

使用温和的时间衰减,让近期论文更容易浮现,同时保留较早基础工作的价值。 年份:2025

方法质量 25%
80

检查可见的摘要与分析字段,寻找实验、数据集、基线、指标和局限性等方法证据。 命中信号:基线、评估、实验、结果

主题相关性 42%
62.9

使用现有 LLM 关键词相关性评分,并归一化到 0-100。 关键词:world model、world simulator、generative world model、interactive world model、video world model、world dynamics prediction、model-based reinforcement learning world model

可复现性 25%
38

检查链接和可见文本中的论文、代码、数据集、工件与仓库信号。 论文:有;代码:无;数据:无;命中信号:GitHub

研究版图角色

前沿论文方法锚点

排序敏感性

稳定性:volatile;排名波动范围:136。

关键词评分

world model
10
world dynamics prediction
9
model-based reinforcement learning world model
9
generative world model
6
world simulator
5
video world model
3
interactive world model
2

深度分析

创新点

  • 集成视觉语言模型(VLM)以提供基于场景理解的语义安全信号,用于自动驾驶强化学习
  • 利用学习到的世界模型从观察到的上下文中想象未来轨迹,实现无需真实世界交互的离线推理
  • 基于VLM的安全评估对想象未来进行评价,明确地将未来预期与语义风险评估耦合
  • 统一的闭环框架(观察-想象-评估-行动),实现更安全、更高效的离线策略学习

方法

VLM-SAFE是一个遵循观察-想象-评估-行动人类认知循环的离线安全强化学习框架。它使用离线驾驶数据、提供语义安全信号的VLM、预测未来轨迹的世界模型,以及基于VLM的安全评估来指导演员-评论家策略优化。

关键结果

在仿真实验中,与代表性基线相比,VLM-SAFE在安全性、交通密度变化下的鲁棒性以及安全-性能权衡方面均取得了更好的表现。

标签