Physis-Lang:作为视频世界模型物理表征的自进化语言
TLDR
Physis-Lang以自进化物理语言为视频世界模型共享表征,通过字幕优化与数据整理提升物理合理性。
评分理由
The paper presents a novel framework that revisits language's role in physical video modeling, supported by a new benchmark and experiments on multiple backbones. Weaknesses include limited visible details on quantitative results and potential limitations of language for precise physical dynamics.
Read-first 评分解释
综合优先阅读分 34,由主题、引用、图谱、方法、可复现性和近期性等信号加权得到。 原始总分保留为 41。
研究版图角色
前沿论文
排序敏感性
稳定性:volatile;排名波动范围:315。
关键词评分
深度分析
创新点
- 提出 Physis-Lang,一种自进化框架,将物理语言视为跨数据整理、模型训练和视频生成的共享且可优化的表征。
- 挑战了自然语言不足以表示可靠视频生成所需物理知识的假设。
- 提出 PhysCapBench,将物理过程分解为原子断言,并使用召回率和精确率评估字幕。
- 使用智能体循环迭代分析断言级字幕错误,并细化用于生成物理字幕的指令。
- 将模型缺陷转化为文本描述,并使用语言引导的检索获取覆盖缺失物理过程的视觉多样视频。
方法
Physis-Lang 通过描述实体、原因、交互、支配原理、时间演化与效应的语言来表示物理过程,并将这种语言视为跨数据整理、训练和生成的可优化表征。PhysCapBench 通过将过程分解为原子断言并以召回率和精确率评分来评估物理字幕;智能体循环根据断言级错误细化字幕生成指令。模型缺陷被转化为文本描述以指导检索多样化的训练视频,实验使用 Wan 和 Cosmos 骨干在四个物理视频基准上进行。
关键结果
Physis-Lang 增强的模型在基于 Wan 和 Cosmos 骨干的四个物理视频基准上,物理合理性持续提升。从开源 Cosmos3-Nano 骨干出发,增强后的模型超越了领先的专有 Veo 3.1 模型。
技术栈
Physis-LangPhysCapBenchWanCosmosCosmos3-NanoVeo 3.1