OpenAI 提出 Contrastive SDF 测量模型的奖励寻求倾向

OpenAI 与 Apollo Research 提出 Contrastive Synthetic Document Finetuning（Contrastive SDF），通过在匹配语料上微调两份同一模型、让评分者偏好与用户或开发者偏好相互对立，以行为差距衡量模型对评分者偏好的因果敏感度。