2026-10-14T11:00:46Z https://www.scidb.cn/oai

10.57760/sciencedb.010bo 2026-08-28T10:28:43Z

2026-08-28 SciRerankBench：面向科学检索增强生成大语言模型的重排序器基准 doi:10.57760/sciencedb.010bo en 面向科学领域重排序 RAG 的评测基准 SciRerankBench（Scientific Rerank-oriented RAG Benchmark），用于评估 RAG-LLM 系统中的重排序器，覆盖 5 个科学学科领域。该基准构建于超过 2.5 亿篇学术文献以及 1 亿余名作者的数据之上。为了从噪声鲁棒性、相关性辨析能力和事实一致性三个方面严格评估重排序器的性能，我们构建了三类“问题–上下文–答案”（Question-Context-Answer，Q-C-A）样本，即噪声上下文（Noisy Contexts，NC）、语义相似但逻辑无关上下文（Semantically Similar but Logically Irrelevant Contexts，SSLI）以及反事实上下文（Counterfactual Contexts，CC）。 Rerank; RAG; Scientific data 陈昊天 龙晴晴 肖濛 Xiao Luo 琚玮 王学志 周园春 祝恒书 PUBLIC https://creativecommons.org/licenses/by/4.0/ dataset Science Data Bank