Pelican-Sim 1.0:面向具身智能的通用世界模型模拟器
TLDR
Pelican-Sim 1.0是面向具身智能的通用世界模型模拟器,利用统一动作表示、稀疏MoE和高效rollout提升预测与基准表现。
评分理由
The paper introduces a principled simulator architecture with clear innovations and validates them via extensive quantitative comparisons and downstream tasks on multiple benchmarks. However, as a technical report, the abstract reveals limited information about implementation details, baselines, and potential limitations, so some claims require fuller scrutiny.
Read-first 评分解释
综合优先阅读分 45.7,由主题、引用、图谱、方法、可复现性和近期性等信号加权得到。 原始总分保留为 62。
研究版图角色
排序敏感性
稳定性:volatile;排名波动范围:762。
关键词评分
深度分析
创新点
- 面向具身智能的通用世界模型模拟器,从视觉上下文和机器人动作预测未来观测
- 统一的28维动作值空间覆盖主流具身形态,使单一模型可跨异构设备使用
- 使用URDF和相机渲染的动作视频进行动作-视觉注入,桥接动作与像素,提升可控性
- 稀疏混合专家层为异构动力学增加容量并减少模态间冲突
- 通过因果适配和少步蒸馏实现高效rollout生成,形成四步自回归模拟器
- 在约一百万条真实与仿真轨迹上训练
方法
Pelican-Sim 1.0是一个世界模型模拟器,在约一百万条真实与仿真轨迹上训练,从视觉上下文和机器人动作预测未来观测。它结合统一的28维动作表示、URDF和相机渲染的动作视频以实现动作-视觉注入、稀疏混合专家层,以及因果适配与少步蒸馏,构建四步自回归模拟器。评估涵盖在AgiBotWorld Beta、RoboMIND和RoboTwin上相对于稠密基线和替代融合基线的视频质量与可控性指标,以及在RoboTwin上的下游策略实验。
关键结果
Pelican-Sim 1.0在AgiBotWorld Beta上将PSNR相比最强评估基线提高4.636,在RoboMIND上提高2.080,在RoboTwin上提高10.343,并将适配后的EWMBench DYN分数在RoboTwin上提升0.426。在RoboTwin下游任务中,每个任务的50条演示额外加入500条生成轨迹后,策略成功率从70%提高到93%;策略评估在五个检查点上达到0.994的Pearson相关系数;动作选择相对成功率增益达47.7%,策略改进达20.3%。