发生了什么
[OpenRouter] 排行榜 [AutoExacto](TAU-Bench+GPQA)|OpenRouter 使用 AutoExacto 评测开源模型并发布排行榜
为什么值得关注
AutoExacto 是 OpenRouter 内部的模型评测框架,提供自动化基准测试并降低开发者对开源模型的信任成本。
信息来源
以下内容来自公开来源,可打开原文继续核验。
01
OpenRouter continuously runs GPQA and TAU-
OpenRouter 与 Parasail.io 和 Zai.org 合作,使用 AutoExacto meta-benchmark 对开源模型进行自动化评测并公开结果,该工具被默认用于路由模型调用,AutoExacto 基于 GPQA 和 TAU-Bench,模型排行榜显示 Parasail.io 和 Zai.org 排名靠前。
打开原始来源 ↗