RLVR无免费午餐理论论文发布

2026年11月2日，r/MachineLearning 用户 /u/SwimmingAmbition5148 发布一篇关于 RLVR（可验证奖励强化学习）的理论论文，提出在策略专门化条件下，RLVR 每次提升 pass@1 都会严格降低某些 prompt 上的成功率，即不存在“免费午餐”；pass@k 的交叉次数受每个 prompt 成功率变化符号变化数约束，1 到 6 次交叉的界是紧的。该论文为纯理论工作，没有新的训练实验。作者称，在转录自 2607.20543 的 Omni-MATH 已发表 GRPO 数据上（仅作示意），发现 k=64 与 k=256 之间存在一次交叉。论文同时说明，共享策略模型是总体极限下的抽象，强制交叉需要覆盖假设，并给出了该假设失效的情形。

AI 根据报道生成 · 2 小时前更新

还没有足够的连续观测数据，暂不绘制趋势。