发生了什么
RPC-Bench 公布 基准数据(61.3K QA pairs, 4150 papers)
为什么值得关注
该基准的数据来源于真实论文审稿环节,对评估模型论文理解能力有独特价值,建议查看原文了解具体任务和GPT-5等模型的表现。
信息来源
以下内容来自公开来源,可打开原文继续核验。
01
RPC-Bench 论文理解基准
RPC-Bench是一个长上下文和多模态文档理解基准,包含61.3K QA对(来自4150篇论文),其中约15K经过人工验证;GPT-5在该基准上的正确性-完整性得分为68.2%,调整简洁性后降至37.46%。
打开原始来源 ↗