跳到正文
2023年2月16日周四
2023年2月1日周三
2023年1月31日周二
2023年1月23日周一
2023年1月11日周三
  1. OpenAI:官网动态49

    OpenAI 与乔治城大学、斯坦福互联网观测站联合研究语言模型被用于虚假信息活动的潜在风险

    OpenAI 联合乔治城大学安全与新兴技术中心及斯坦福互联网观测站,研究大语言模型可能被滥用于虚假信息活动的风险。合作包括 2021 年 10 月汇聚 30 位虚假信息研究者、机器学习专家与政策分析师的研讨会,并基于一年多的研究共同撰写报告。报告梳理了语言模型若被用于增强虚假信息活动对信息环境构成的威胁,并提出分析潜在缓解措施的框架。

2022年12月16日周五
2022年12月15日周四
2022年11月30日周三
  1. OpenAI:官网动态95

    OpenAI 发布对话式模型 ChatGPT

    OpenAI 训练了名为 ChatGPT 的模型,能以对话方式交互。对话格式让 ChatGPT 可以回答追问、承认错误、质疑错误前提并拒绝不当请求。

    推荐理由:OpenAI 官方首次介绍 ChatGPT,说明对话式交互在追问、纠错和拒答上的设计意图,可作为理解该产品起点的一手材料。

2022年11月3日周四
  1. OpenAI:官网动态68

    OpenAI 开放 DALL·E API 公共测试

    OpenAI 宣布 DALL·E API 即日起开放公测,开发者可以开始使用该 API 构建应用。

    推荐理由:OpenAI 官方开放 DALL·E API 公测,开发者可以直接据此评估是否将图像生成接入自己的应用。

2022年9月28日周三
  1. OpenAI:官网动态75

    OpenAI 取消 DALL·E 候补名单,新用户可直接使用

    OpenAI 宣布 DALL·E 取消候补名单,新用户可以立即开始生成图像。官方表示这一更广泛的开放来自部署中积累的经验和安全系统的改进。

    推荐理由:原文说明开放注册的前提来自部署经验与安全系统改进,读者可以据此理解其放开访问的背景。

2022年9月21日周三
  1. OpenAI:官网动态74

    OpenAI 开源语音识别模型 Whisper

    OpenAI 训练并开源了名为 Whisper 的神经网络,其英文语音识别的稳健性和准确率接近人类水平。

    推荐理由:原文来自 OpenAI 官方,点明 Whisper 在英文语音识别上的稳健性和准确率接近人类水平,并直接开源。

2022年8月31日周三
2022年8月10日周三
2022年7月20日周三
2022年6月23日周四
  1. OpenAI:官网动态62

    OpenAI 用 Video PreTraining 训练神经网络玩 Minecraft 并合成钻石工具

    OpenAI 通过 Video PreTraining(VPT)在大量无标注人类 Minecraft 游玩视频上训练神经网络,仅使用少量承包商标注数据,微调后模型可合成钻石工具,这一任务熟练人类通常需要超过 20 分钟、约 24,000 个操作。模型使用键盘和鼠标的原生人类接口,是迈向通用计算机操作智能体的一步。

    推荐理由:原文说明 VPT 用少量标注数据配合海量无标注视频训练模型,读者可了解这种半监督路线对训练通用智能体的参考价值。

2022年6月13日周一
  1. OpenAI:官网动态47

    OpenAI 训练“写批评”模型,帮助人类发现摘要缺陷

    OpenAI 训练了“critique-writing”模型,用于描述摘要中的缺陷;人类评估者在看到模型批评后,发现摘要缺陷的频率大幅提高。更大模型的自批评能力更强,规模对批评写作的提升超过摘要写作。这显示出用 AI 系统辅助人类监督 AI 系统完成困难任务的潜力。

2022年6月9日周四
2022年6月2日周四
2022年5月18日周三
2022年4月13日周三
2022年4月7日周四
  1. Sam Altman:Blog

    DALL•E 2

    OpenAI 发布 DALL•E 2 研究版本,支持通过自然语言指令生成和编辑图像。作者认为这标志着计算机界面新趋势——自然语言交互,并指出与 Copilot 不同,DALL•E 2 能独立完成完整作品,可能率先冲击创意工作而非体力劳动,预示 AI 对劳动力市场的潜在影响。团队计划今年夏天正式产品化,当前采用渐进式部署策略以评估风险。

2022年3月15日周二
2022年2月2日周三
2022年1月27日周四
  1. OpenAI:官网动态84

    OpenAI 发布 InstructGPT 并设为 API 默认语言模型

    OpenAI 训练出比 GPT-3 更能遵循用户意图的 InstructGPT 模型,同时更真实、毒性更低。模型采用人在回路的对齐研究技术训练,现已作为 OpenAI API 的默认语言模型部署。

    推荐理由:原文说明了对齐训练带来的意图遵循与真实性改进,以及 InstructGPT 成为 API 默认模型这一关键落地变化。

2022年1月25日周二
  1. OpenAI:官网动态69

    OpenAI API 推出 text 和 code embeddings 新端点

    OpenAI 在 API 中推出 embeddings 新端点,用于自然语言和代码任务。该端点可支持语义搜索、聚类、主题建模和分类等应用。

    推荐理由:原文给出了新的 embeddings 端点及其适用任务,读者可据此判断能否用于搜索、聚类或分类类需求。

2021年12月16日周四
2021年12月14日周二
  1. OpenAI:官网动态60

    OpenAI 推出 GPT-3 应用定制微调功能

    OpenAI 宣布可为应用定制 GPT-3,通过微调(fine-tuning)适配自身场景。官方称只需一条命令即可完成微调。

    推荐理由:OpenAI 官方宣布以单条命令即可对 GPT-3 做应用定制微调,降低了把基座模型适配到具体业务场景的门槛。

2021年11月18日周四
  1. OpenAI:官网动态71

    OpenAI API 取消等候名单,全面开放使用

    OpenAI 宣布其 API 取消等候名单,开放更广泛的使用。OpenAI 表示,更广泛的开放得益于安全方面的进展。

    推荐理由:原文说明开放原因是安全性进展,读者可以了解 OpenAI API 使用门槛的降低节点。

2021年10月29日周五
2021年9月23日周四
2021年9月8日周三
2021年8月10日周二
2021年7月28日周三
  1. OpenAI:官网动态60

    OpenAI 开源 Triton 1.0:让研究者无需 CUDA 经验也能写高效 GPU 代码

    OpenAI 发布 Triton 1.0,一种类 Python 的开源编程语言。它让没有 CUDA 经验的研究者也能写出高效 GPU 代码,多数情况下效率与专家手写代码相当。

    推荐理由:官方发布口径直接点明了 Triton 的核心价值,让无 CUDA 经验的研究者也能写出接近专家水平的 GPU 代码。

2021年7月7日周三
2021年6月10日周四
2021年5月25日周二
  1. EleutherAI:Blog

    关于 OpenAI API 模型规模的探讨

    研究团队利用 eval harness 评估框架,通过对比 OpenAI API 模型在标准测试集上的性能表现,成功反向推算出其模型参数规模。该方法基于模型能力与参数量之间的相关性,分析了包括 GPT 系列在内的闭源模型在各项任务中的得分差异,揭示了 OpenAI 未公开披露的模型大小信息,为理解这些模型的实际规模与能力边界提供了量化依据。

2021年3月25日周四
2021年3月4日周四
  1. OpenAI:官网动态59

    OpenAI 发现 CLIP 中的多模态神经元

    OpenAI 发现 CLIP 中存在对同一概念以字面、符号或概念形式呈现时都会响应的多模态神经元。这一现象可能解释 CLIP 对概念的特殊视觉呈现仍能准确分类的原因,也是理解 CLIP 及类似模型习得的关联和偏差的重要一步。

2021年1月25日周一
2021年1月5日周二