TaxoAlign:使用语言模型生成学术分类法
TLDR
TaxoAlign使用三阶段指令引导生成学术分类法,并在人类撰写综述分类基准上评估。
评分理由
The paper introduces a novel benchmark (CS-TaxoBench) and a method (TaxoAlign) that outperforms baselines in structural and semantic alignment with human taxonomies. However, it is limited to taxonomy generation within computer science and does not address full survey generation or other scientific domains.
Read-first 评分解释
综合优先阅读分 62.8,由主题、引用、图谱、方法、可复现性和近期性等信号加权得到。 原始总分保留为 37。
研究版图角色
前沿论文方法锚点复现锚点
排序敏感性
稳定性:volatile;排名波动范围:157。
关键词评分
深度分析
创新点
- CS-TaxoBench基准:包含从人类撰写的综述论文中提取的460个分类法,以及从会议综述中整理的80个测试分类法
- TaxoAlign:一种用于学术分类法生成的三阶段基于主题的指令引导方法
- 严格的自动评估框架,用于衡量与人类创建分类法的结构对齐和语义一致性
方法
TaxoAlign是一种三阶段基于主题的指令引导方法,使用语言模型。CS-TaxoBench基准包含从人类撰写的综述中提取的460个训练分类法和从会议综述中整理的80个测试分类法。评估使用自动指标衡量结构对齐和语义一致性,并结合人工评估研究,与基线方法进行比较。
关键结果
TaxoAlign在自动评估和人工评估中几乎所有指标上持续超越基线方法。