Awesome Auto Research Hub 论文 · 数据集 · 项目
← 返回论文列表

MIR:面向科学研究问题的方法论灵感检索

arXiv 2025 57.6 method

TLDR

提出方法论灵感检索(MIR),利用方法论邻接图检索启发研究问题解决方案的先前工作。

评分理由

Strengths: Novel task definition and dataset, clear methodology with MAG and dense retrievers, significant performance gains. Weaknesses: Limited to retrieval component; no full automation or real-world experimental validation beyond literature.

Read-first 评分解释

综合优先阅读分 57.6,由主题、引用、图谱、方法、可复现性和近期性等信号加权得到。 原始总分保留为 53。

方法质量 25%
90

检查可见的摘要与分析字段,寻找实验、数据集、基线、指标和局限性等方法证据。 命中信号:消融、基线、数据集、评估、结果

近期性 8%
86.7

使用温和的时间衰减,让近期论文更容易浮现,同时保留较早基础工作的价值。 年份:2025

主题相关性 42%
44.2

使用现有 LLM 关键词相关性评分,并归一化到 0-100。 关键词:AI scientist、automated scientific discovery、autonomous research agent、automated research、literature review agent、survey generation、automated experimentation、experiment design agent、AI for scientific research、paper writing agent、research automation、scientific discovery agent

可复现性 25%
38

检查链接和可见文本中的论文、代码、数据集、工件与仓库信号。 论文:有;代码:无;数据:无;命中信号:数据集

研究版图角色

前沿论文方法锚点

排序敏感性

稳定性:volatile;排名波动范围:45。

关键词评分

automated scientific discovery
8
AI for scientific research
8
research automation
7
automated research
6
literature review agent
6
scientific discovery agent
6
AI scientist
4
autonomous research agent
3
survey generation
2
automated experimentation
1
experiment design agent
1
paper writing agent
1

深度分析

创新点

  • 定义了方法论灵感检索(MIR)这一新任务,用于检索能够启发研究问题解决方案的先前工作。
  • 构建了一个专门用于训练和评估MIR检索器的新数据集。
  • 引入了方法论邻接图(MAG),通过引用关系捕获方法论谱系。
  • 将MAG作为直观先验嵌入密集检索器,以识别超越表面语义相似性的方法论灵感模式。
  • 将基于LLM的重排序策略适配到MIR任务,以进一步提升检索效果。

方法

作者定义了MIR并构建了一个用于训练和评估的新数据集。他们通过引用关系构建方法论邻接图(MAG)以捕获方法论谱系,并将该图作为直观先验嵌入密集检索器。他们还进一步将基于LLM的重排序策略适配到MIR任务以优化检索结果。

关键结果

将MAG融入密集检索器在强基线上实现了Recall@3提升+5.4、mAP提升+7.8;加入基于LLM的重排序进一步带来Recall@3提升+4.5、mAP提升+4.8。

标签

AICL