ARC Prize· @arcprize · X·· 3 小时前AI 评分53
AI 导读
ARC Prize 公布 Claude Sonnet 5.5 在 ARC-AGI 系列基准上的 Verified 成绩:ARC-AGI-3 在 provider adapter harness 下为 72.4%、成本 $8.2K,在标准 harness 下为 24.3%、成本 $7.4K;ARC-AGI-2 为 83.9%、$0.55/task;ARC-AGI-1 为 96.5%、$0.14/task。ARC Prize 称 Sonnet 5.5 在 ARC-AGI-3 上的 72.4% 值得关注。
正文
Claude Sonnet 5.5 from @AnthropicAI on ARC-AGI (Verified):
- ARC-AGI-3: 72.4%, $8.2K (provider adapter harness), 24.3%, $7.4K (standard harness)
- ARC-AGI-2: 83.9%, $0.55/task
- ARC-AGI-1: 96.5%, $0.14/task
Sonnet 5.5 is notable for its 72.4% score on ARC-AGI-3.
来源:ARC Prize · x.com