跳到正文
3月6日周三
3月4日周一
2月26日周二
2月19日周二
  1. OpenAI News42

    OpenAI:AI 安全研究需要社会科学家参与

    OpenAI 发布论文指出,长期 AI 安全研究需要社会科学家参与,以确保 AI 对齐算法在涉及真实人类时能够奏效。论文认为,要让先进 AI 系统与人类价值观正确对齐,必须解决人类理性、情绪与偏见等心理学层面的诸多不确定性,OpenAI 计划全职招聘社会科学家推进这一方向。

2月14日周四
  1. OpenAI News78

    OpenAI 发布大规模无监督语言模型,多项基准达 SOTA

    OpenAI 训练了一个大规模无监督语言模型,能够生成连贯的段落文本,在多项语言建模基准上取得当时最好成绩。该模型无需针对特定任务训练,即可完成基础的阅读理解、机器翻译、问答和摘要任务。

    推荐理由:OpenAI 官方披露一个大规模无监督语言模型,在多项语言建模基准上取得当时最好成绩,并零样本完成阅读理解、翻译、问答与摘要。

12月19日周三
12月14日周五
  1. OpenAI News42

    OpenAI 研究:AI 训练如何扩展——梯度噪声尺度可预测并行性

    OpenAI 发现梯度噪声尺度这一统计指标能预测神经网络训练在多种任务上的可并行性。由于复杂任务的梯度噪声更大,未来更大的 batch size 可能变得有用,从而消除 AI 系统继续扩展的一项潜在限制。该结果表明神经网络训练并非神秘技艺,而是可以被严格化和系统化的。

12月6日周四
11月8日周四
11月7日周三
  1. OpenAI News40

    OpenAI 用能量函数模型学习概念

    OpenAI 开发出一种基于能量的模型,仅需五次演示即可学会识别并生成以 2D 点集表达的概念,如 near、above、between、closest 和 furthest。该模型还展现出跨域迁移能力:在 2D 粒子环境中学会的概念可用于解决 3D 物理机器人的任务。

10月31日周三
10月22日周一
10月11日周四
10月9日周二
9月10日周一
8月23日周四
8月6日周一
7月30日周一
7月25日周三
7月18日周三
7月9日周一
7月4日周三
  1. OpenAI News62

    OpenAI 用单次演示让智能体在《蒙特祖玛的复仇》中取得 74500 分

    OpenAI 训练出一个智能体,仅凭单次人类演示就在《蒙特祖玛的复仇》中取得 74500 分的高分,超过此前所有已公布结果。其算法从演示中挑选特定状态作为起点,让智能体依次游玩并优化游戏得分,所用强化学习算法 PPO 也是 OpenAI Five 的基础。

    推荐理由:OpenAI 用单次人类演示加 PPO 在《蒙特祖玛的复仇》上取得 74500 分,可了解演示驱动强化学习的早期思路。

6月25日周一
  1. OpenAI News62

    OpenAI Five 在 Dota 2 中开始战胜业余人类队伍

    OpenAI 宣布其由五个神经网络组成的团队 OpenAI Five 已在 Dota 2 中开始战胜业余人类队伍。该团队由五个神经网络构成,此次公布的是这一阶段性对战结果。

    推荐理由:OpenAI 公开了由五个神经网络组成的 OpenAI Five 在 Dota 2 中开始战胜业余人类队伍这一阶段性结果。

6月22日周五
6月11日周一
  1. OpenAI News82

    OpenAI 用无监督学习提升语言理解能力

    OpenAI 用 Transformer 结合无监督预训练的可扩展、任务无关系统,在多项语言任务上取得当时最优结果,并对外发布了该系统。OpenAI 表示,这一结果说明监督学习方法与无监督预训练相结合效果很好,希望推动在更大、更多样的数据集上继续探索这一思路。

    推荐理由:OpenAI 用 Transformer 加无监督预训练在多项语言任务上取得当时最优结果,并公开了这套可扩展系统。

5月30日周三
5月25日周五
5月16日周三
  1. OpenAI News78

    OpenAI 分析:2012 年以来最大 AI 训练算力每 3.4 个月翻倍

    OpenAI 发布一项分析,指出自 2012 年以来最大规模 AI 训练所用算力呈指数增长,翻倍周期为 3.4 个月,而摩尔定律的翻倍周期为 2 年。同一时期该指标增长超过 300,000 倍,若按 2 年翻倍则仅增长 7 倍。OpenAI 表示算力提升是 AI 进展的关键组成部分,若这一趋势延续,值得为远超当前能力的系统做准备。

    推荐理由:OpenAI 用一组量化数据说明最大规模 AI 训练算力的增长节奏,可与摩尔定律对照理解算力趋势。

5月3日周四
4月18日周三
4月5日周四
3月15日周四
3月7日周三
  1. OpenAI News40

    OpenAI 提出可扩展元学习算法 Reptile

    OpenAI 开发出可扩展的元学习算法 Reptile,通过反复采样任务、对其执行随机梯度下降,并将初始参数朝该任务最终学到的参数更新。Reptile 是将 Shortest Descent 算法应用于元学习场景,数学上与一阶 MAML 相似,只需黑盒访问 SGD 或 Adam 等优化器,计算效率与性能相近。

3月6日周二
2月26日周一
2月22日周四
2月20日周二
2月15日周四
2月7日周三