面向回合级智能体强化学习的科学发现环境扩展
TLDR
SciDisco:一个可扩展的框架,利用过程可验证环境和回合级强化学习训练科学发现智能体。
评分理由
The paper introduces a well-structured framework (SciDisco) with clear components (SciThèque, DAG trajectory synthesis, DiscoPO) and achieves SOTA on benchmarks, demonstrating strong methodology. However, the abstract lacks details on the specific datasets and real-world applicability, and the scope is limited to hypothesis-driven data analysis rather than full scientific discovery.
Read-first 评分解释
综合优先阅读分 58.7,由主题、引用、图谱、方法、可复现性和近期性等信号加权得到。 原始总分保留为 60。
研究版图角色
前沿论文方法锚点
排序敏感性
稳定性:volatile;排名波动范围:21。
关键词评分
深度分析
创新点
- SciDisco框架,用于在过程可验证环境中训练科学发现智能体
- SciThèque:将假设、数据集、隐藏证据图和验证器编译成具有进度检查的任务环境
- 基于DAG的轨迹合成,构建经过验证器筛选的多轮演示
- DiscoPO:利用环境作为训练信号进行回合级信用分配,奖励产生可验证分析证据的动作
方法
本文提出SciDisco框架,该框架使用SciThèque创建具有隐藏证据图和验证器的过程可验证环境。基于DAG的轨迹合成生成多轮演示,并由验证器筛选,DiscoPO为产生可验证证据的动作分配回合级信用。训练了一个14B模型,并在假设驱动的科学数据分析基准上进行评估。
关键结果
SciDisco-14B在假设驱动的科学数据分析基准上达到了最先进水平。