PhysWorld: 从真实视频到可变形物体的世界模型——通过物理感知的演示合成
TLDR
PhysWorld从真实视频合成物理感知的演示,以训练快速准确的可变形物体世界模型。
评分理由
The paper presents a novel framework that addresses data scarcity by creating digital twins and generating diverse demonstrations, achieving significant speedup over prior work. Strengths include physics-consistent modeling and real video refinement; weaknesses are the reliance on a specific simulator (MPM) and focus on deformable objects, limiting generality.
Read-first 评分解释
综合优先阅读分 58.8,由主题、引用、图谱、方法、可复现性和近期性等信号加权得到。 原始总分保留为 53。
研究版图角色
前沿论文
排序敏感性
稳定性:volatile;排名波动范围:467。
关键词评分
深度分析
创新点
- 利用模拟器进行物理感知的演示合成,以克服可变形物体的数据稀缺问题
- 通过本构模型选择和物理属性的全局到局部优化,构建物理一致的数字孪生
- 对物理属性应用部分感知的扰动,以生成多样化的运动模式和广泛的演示
- 轻量级基于GNN的世界模型,嵌入物理属性,实现快速准确的未来预测
- 利用真实视频进一步优化物理属性,提高模型精度
方法
PhysWorld首先通过选择本构模型并全局和局部优化物理属性,在MPM模拟器中构建可变形物体的物理一致数字孪生。然后,对这些属性应用部分感知的扰动,生成多样化的运动模式,从而合成大量的训练演示。在这些演示上训练一个轻量级的基于GNN的世界模型,该模型嵌入了物理属性,并且可以使用真实视频进一步优化这些属性。
关键结果
PhysWorld对各种可变形物体实现了准确的未来预测,并很好地泛化到新的交互中,推理速度比最新方法PhysTwin快47倍。