Awesome Auto Research Hub 论文 · 数据集 · 项目
← 返回论文列表

EMBL AI Librarian:面向AI代理的生命科学知识层

arXiv 2026 55.5 method

TLDR

EMBL AI Librarian利用LLM编排升级Europe PMC,为AI代理检索并提取证据,将Citation F1提升16点。

评分理由

The paper addresses a practical need for AI agents to efficiently access life-sciences literature, with a strong evaluation across multiple benchmarks. However, its reliance on Europe PMC and lack of cross-domain generalization are limitations.

Read-first 评分解释

综合优先阅读分 55.5,由主题、引用、图谱、方法、可复现性和近期性等信号加权得到。 原始总分保留为 45。

近期性 8%
100

使用温和的时间衰减,让近期论文更容易浮现,同时保留较早基础工作的价值。 年份:2026

方法质量 25%
80

检查可见的摘要与分析字段,寻找实验、数据集、基线、指标和局限性等方法证据。 命中信号:基线、基准、指标、结果

可复现性 25%
46

检查链接和可见文本中的论文、代码、数据集、工件与仓库信号。 论文:有;代码:无;数据:无;命中信号:代码、GitHub

主题相关性 42%
37.5

使用现有 LLM 关键词相关性评分,并归一化到 0-100。 关键词:AI scientist、automated scientific discovery、autonomous research agent、automated research、literature review agent、survey generation、automated experimentation、experiment design agent、AI for scientific research、paper writing agent、research automation、scientific discovery agent

研究版图角色

前沿论文方法锚点

排序敏感性

稳定性:volatile;排名波动范围:70。

关键词评分

literature review agent
8
research automation
7
AI for scientific research
6
automated research
5
scientific discovery agent
5
autonomous research agent
4
automated scientific discovery
3
AI scientist
2
survey generation
2
automated experimentation
1
experiment design agent
1
paper writing agent
1

深度分析

创新点

  • 提出EMBL AI Librarian,这是一个知识层,将Europe PMC等文献数据库升级为AI代理可用的接口,支持自然语言查询和证据检索。
  • 采用单个LLM编排整个检索过程:规划互补子查询,在Europe PMC上执行实时搜索,并从论文中提取证据。

方法

EMBL AI Librarian使用单个LLM将自然语言查询分解为子查询,针对实时Europe PMC搜索引擎执行;然后LLM读取检索到的论文以定位并返回相关证据。系统在四个基准(文献综合、声明验证、开放域问答和下游生物学任务)上使用Citation F1和专家一致性等指标进行评估。

关键结果

在ScholarQABench上,Librarian的Citation F1比强基线提高超过16点;在声明验证中,增加了与专家共识的一致性;在LitQA2上,基于Librarian的GPT-5.4代理比使用网络搜索的得分高出约8点。

标签