跳到正文
Google Research·· 2026-04-01AI 评分35

Google Research 研究:AI 评测需要多少标注者才够?

Building better AI benchmarks: How many raters are enough?

AI 导读

Google Research 在论文《Forest vs Tree: The (N, K) Trade-off in Reproducible ML Evaluation》中研究了评测条目数与每条目标注者数的权衡,并已将模拟器在 GitHub 开源。

来源:Google Research · research.google