DSWorld: 面向高效自主智能体的数据科学世界模型
TLDR
DSWorld是数据科学世界模型,预测执行结果,加速RL训练和搜索推理约3-14倍。
评分理由
The paper presents a novel framework (DSWorld) that models data science environment transitions, combining structured state construction, cost-aware routing, and an LLM simulator. Strengths include a clear problem motivation, a new dataset, and strong empirical results (14x training speedup, 35.6% improvement over LLM baseline). Weaknesses: the abstract lacks details on generalization or limitations of the simulator, and the 'world model' terminology is specific to data science rather than general domains.
Read-first 评分解释
综合优先阅读分 43.6,由主题、引用、图谱、方法、可复现性和近期性等信号加权得到。 原始总分保留为 41。
研究版图角色
排序敏感性
稳定性:volatile;排名波动范围:396。
关键词评分
深度分析
创新点
- 提出数据科学世界模型概念,用于预测数据科学工作流中的环境状态转移
- DSWorld框架,结合结构化状态构建、成本感知路由、轻量级真实执行和基于LLM的昂贵操作模拟器
- 构建8K规模的转移轨迹数据集用于训练
- 反思性世界模型优化,一种用于改进转移预测的误差感知强化学习策略
方法
DSWorld通过预测给定当前工作流状态和候选操作下的状态转移来建模数据科学执行环境。该框架采用结构化状态构建、成本感知路由以决定轻量级真实执行与基于LLM的模拟之间的选择,并使用8K轨迹数据集和误差感知RL策略(反思性世界模型优化)进行训练。
关键结果
DSWorld将基于RL的智能体训练加速约14倍,基于搜索的推理加速约3-6倍,同时保持竞争性能,并在转移预测任务上比最强LLM基线高出35.6%。