Awesome Auto Research Hub 论文 · 数据集 · 项目
← 返回论文列表

HybridQuestion:人机协作识别高影响力研究问题

arXiv 2025 47.6 method

TLDR

提出一个三阶段的人机混合系统来识别高影响力研究问题,并通过跨五个学科的实验验证。

评分理由

Strengths include a clear three-phase methodology combining AI scalability with human judgment, and a concrete experiment. Weaknesses: abstract is cut off, limiting full assessment; the approach is hybrid, not fully autonomous, which may limit novelty claims.

Read-first 评分解释

综合优先阅读分 47.6,由主题、引用、图谱、方法、可复现性和近期性等信号加权得到。 原始总分保留为 37。

近期性 8%
86.7

使用温和的时间衰减,让近期论文更容易浮现,同时保留较早基础工作的价值。 年份:2025

方法质量 25%
80

检查可见的摘要与分析字段,寻找实验、数据集、基线、指标和局限性等方法证据。 命中信号:分析、实验、验证

主题相关性 42%
30.8

使用现有 LLM 关键词相关性评分,并归一化到 0-100。 关键词:AI scientist、automated scientific discovery、autonomous research agent、automated research、literature review agent、survey generation、automated experimentation、experiment design agent、AI for scientific research、paper writing agent、research automation、scientific discovery agent

可复现性 25%
30

检查链接和可见文本中的论文、代码、数据集、工件与仓库信号。 论文:有;代码:无;数据:无;命中信号:无

研究版图角色

前沿论文桥接论文方法锚点

排序敏感性

稳定性:volatile;排名波动范围:34。

关键词评分

AI for scientific research
8
AI scientist
6
automated scientific discovery
5
research automation
5
automated research
4
literature review agent
3
scientific discovery agent
3
autonomous research agent
2
survey generation
1
automated experimentation
0
experiment design agent
0
paper writing agent
0

深度分析

创新点

  • 人机混合框架用于识别高影响力研究问题,整合了AI的可扩展文献处理能力与人类价值判断。
  • 三阶段方法论:AI加速信息收集、通过六个LLM集成和跨模型投票提出候选问题、以及逐步增加人类监督的混合问题筛选。
  • 系统在多个学科中同时应用于回顾性突破识别和前瞻性问题预测。

方法

该系统首先利用AI处理大量文献生成混合信息库。然后由六个不同LLM组成的集成模型提出候选问题,并通过跨模型投票进行筛选。随后通过逐步增加人类参与的多阶段筛选过程优化候选。验证包括识别五个学科的2025年十大科学突破和2026年十大科学问题。

关键结果

AI智能体在已确立的突破上与人类专家高度一致,但在预测未来问题上存在显著分歧,表明人类判断对于主观性、前瞻性挑战至关重要。

局限性

  • AI智能体在预测前瞻性问题时与人类专家存在较大分歧,表明人类判断对于评估主观性、前瞻性挑战仍然至关重要。

标签

HCAICLLG