SWoMo:用于白内障手术模拟的神经符号世界模型
TLDR
SWoMo是一种用于白内障手术模拟的神经符号世界模型,结合了基于规则的运动动力学和基于扩散的视觉真实感。
评分理由
Strengths include a novel decoupling of motion and visual generation, an inverse pairing strategy for sim-to-real translation, and demonstrated generalization and downstream task improvements. Weaknesses are the domain specificity to cataract surgery and potential scalability limits of the rule-based simulator.
Read-first 评分解释
综合优先阅读分 60.3,由主题、引用、图谱、方法、可复现性和近期性等信号加权得到。 原始总分保留为 55。
研究版图角色
基础论文前沿论文桥接论文
排序敏感性
稳定性:volatile;排名波动范围:476。
关键词评分
深度分析
创新点
- 在手术模拟中将运动生成与视觉真实感解耦
- 符号组件:基于规则的模拟器和场景图表示,用于运动动力学和工具-组织交互
- 扩散模型生成逼真的视觉外观,包括纹理和组织变形
- 逆配对策略:在模拟器中重建真实手术视频,获得配对的模拟-真实数据
- 基于配对数据训练视频扩散模型,实现从模拟到真实的翻译
方法
SWoMo采用神经符号架构:符号组件(基于规则的模拟器与场景图)建模运动动力学和工具-组织交互,扩散模型生成逼真的视觉外观。通过逆配对策略在模拟器中重建真实手术视频,获得配对的模拟和真实视频,进而训练视频扩散模型实现从模拟到真实的翻译。
关键结果
SWoMo在定性和定量上均优于先前工作,展现出对未见交互几何的泛化能力、下游阶段检测的提升以及无监督视频风格迁移。
技术栈
Diffusion modelScene graphRule-based simulatorVideo diffusion modelInverse pairing strategy