Google Research·· 2026-07-16AI 评分27
Google Research 揭示扩散模型创造力来源:score smoothing 机制
Towards demystifying the creativity of diffusion models
AI 导读
Google Research 在 ICLR 2026 论文中揭示,扩散模型的创造力源于神经网络训练中的 score smoothing 效应:权重衰减等正则化使学到的 score function 变平滑,让去噪过程在训练数据点之间插值,从而生成新样本。研究用一维 +1/-1 示例和两层 ReLU 网络实验验证,即使没有显式正则化,梯度训练的隐式正则化也能产生该效应。
来源:Google Research · research.google