跳到正文
热点事件持续更新

Artificial Analysis澄清Mercury 3榜单分数不可比

1 篇报道1 个报道来源4 小时前更新

先了解这件事

AI 综述

2026年10月20日,Artificial Analysis 通过其 X 账号(@ArtificialAnlys)澄清:Inception 发布 Mercury 3 时公告中引用的 AA-Omniscience 和 GDPval-AA v2 分数,并非 Artificial Analysis 的 Intelligence Index,也不遵循其方法论,无法与 Artificial Analysis 网站上的分数比较。Artificial Analysis 说明,AA-Omniscience 使用私有数据集,仅开源了 10% 的公开子集;GDPval-AA v2 需采用其评分方法和模型对比集才具可比性。被引用的 Inception 公告称,Mercury 3 是迄今最强的扩散 LLM,在多项基准上超过 GPT-6 Luna 和 Claude Haiku 5.5,速度超过 1,000 tokens/s,规模为 Mercury 1 的 40 倍以上,上下文窗口 1M token,已在 Inception API、Baseten 和 OpenRouter 上线。目前争议焦点在于公告所引分数与 Artificial Analysis 榜单的可比性,Artificial Analysis 未对 Mercury 3 模型本身能力作评价。

AI 根据报道生成 · 4 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月20日
  1. Artificial Analysis
    Artificial Analysis 澄清 Mercury 3 公告引用的分数并非其 Intelligence Index

    Artificial Analysis 指出,Inception 发布 Mercury 3 时提到的 AA-Omniscience 和 GDPval-AA v2 分数并非其 Intelligence Index,也不遵循其方法论,无法与 Artificial Analysis 上的分数比较。AA-Omniscience 使用私有数据集,仅开源了 10% 的公开子集;GDPval-AA v2 需采用其评分方法和模型对比集才具可比性。被引用的 Inception 公告称 Mercury 3 是迄今最强的扩散 LLM,在多项基准上超过 GPT-6 Luna 和 Claude Haiku 5.5,速度超过 1,000 tokens/s,规模为 Mercury 1 的 40 倍以上,上下文窗口 1M token,已在 Inception API、Baseten 和 OpenRouter 上线。

本事件热度走势

可比范围当前
9
可比范围峰值
1010月20日 04:00
近 24 小时变化
–

趋势仅比较持续完整观测到的相同主体,范围可能小于当前热度统计。移动指针或点击图表查看每小时热度;键盘可用左右方向键切换。