⌁ Awesome Auto Research Hub 论文 · 数据集 · 项目
← 返回论文列表

OneSearch-VL:面向图像与视频的统一多模态深度研究智能体

arXiv 2026 49.1 method

TLDR

提出统一多模态深度研究智能体,基于视觉定位证据图统一图像与视频深度研究,显著提升性能。

评分理由

The paper presents a strong unified framework with a novel evidence graph representation, data construction pipelines, and new benchmarks, showing large empirical gains on multimodal research tasks. However, its scope is confined to image/video deep research rather than broader scientific discovery or autonomous experimentation, and evaluation is benchmark-based rather than real-world deployment.

Read-first 评分解释

综合优先阅读分 49.1,由主题、引用、图谱、方法、可复现性和近期性等信号加权得到。 原始总分保留为 31。

近期性 8%
100

使用温和的时间衰减,让近期论文更容易浮现,同时保留较早基础工作的价值。 年份:2026

方法质量 25%
70

检查可见的摘要与分析字段,寻找实验、数据集、基线、指标和局限性等方法证据。 命中信号:基准、评估、实验

可复现性 25%
50

检查链接和可见文本中的论文、代码、数据集、工件与仓库信号。 论文:有;代码:无;数据:无;命中信号:代码、GitHub、仓库

主题相关性 42%
25.8

使用现有 LLM 关键词相关性评分,并归一化到 0-100。 关键词:AI scientist、automated scientific discovery、autonomous research agent、automated research、literature review agent、survey generation、automated experimentation、experiment design agent、AI for scientific research、paper writing agent、research automation、scientific discovery agent

研究版图角色

前沿论文方法锚点

排序敏感性

稳定性:volatile;排名波动范围:110。

关键词评分

automated research
7
research automation
7
autonomous research agent
6
AI for scientific research
3
AI scientist
1
automated scientific discovery
1
literature review agent
1
survey generation
1
automated experimentation
1
experiment design agent
1
paper writing agent
1
scientific discovery agent
1

深度分析

创新点

  • 提出 OneSearch-VL,一个统一的面向单图像、多图像和视频任务的多模态深度研究智能体。
  • 引入视觉定位证据图(VGEG),将局部视觉锚点、实体关系、来源支持的事实和产生答案的操作之间的依赖编码为共享的任务级参考。
  • 开发基于 VGEG 的数据引擎,构建并验证多图像和视频问题,筛选专家轨迹,生成 OneSearch-VL-SFT-110K 和 OneSearch-VL-RL-10K。
  • 从 VGEG 标注中推导出证据感知的视觉定位评分奖励(EVGR),在强化学习中监督证据可追溯性和视觉定位。
  • 构建 OneSearch-MI-Bench 和 OneSearch-Video-Bench,根据 VGEG 中编码的研究操作对问题进行分类。

方法

OneSearch-VL 以视觉定位证据图(VGEG)为核心,将其作为数据构建、过程监督和操作级评估的共享任务级参考。基于 VGEG 的数据引擎构建并验证多图像和视频问题,并筛选专家轨迹,生成用于监督微调的 OneSearch-VL-SFT-110K 和用于强化学习的 OneSearch-VL-RL-10K。在强化学习阶段,证据感知的视觉定位评分奖励(EVGR)监督证据可追溯性和视觉定位;评估将 OneSearch-VL-8B 与具备工具访问权限的 Qwen3-VL-8B 在两个新基准、7 个图像基准和 VideoDR 上进行比较。

关键结果

OneSearch-VL-8B 在 OneSearch-MI-Bench 上比具备工具访问权限的 Qwen3-VL-8B 提高了 20.2 个百分点,在 OneSearch-Video-Bench 上提高了 17.6 个百分点,同时在 7 个图像基准和 VideoDR 上也取得了显著提升。

技术栈

Qwen3-VL-8BVisually Grounded Evidence Graph (VGEG)Evidence-aware Visual-Grounded Rubric reward (EVGR)Supervised Fine-Tuning (SFT)Reinforcement Learning (RL)OneSearch-MI-BenchOneSearch-Video-BenchVideoDR

标签