OpenAI 首席执行官 Sam Altman在最近的一次在线对话中,谈到了 GPT、DALL-E 和通用人工智能(AGI)的未来。Altman 表示,GPT-4 将能够更好地处理上下文,Codex距离彻底改变程序员的工作只需不到一年的时间,而未来几年多模态模型将在语言生成方面抛开纯文本模型。他认为,算法的突破是实现AGI的关键。
Altman确认了GPT-4的研发。他表示,与 GPT-3 一样,GPT-4将是纯文本AI模型,而不是像 DALL-E 那样的多模态 AI 模型。据他称,GPT-4 可能不会比 GPT-3 大多少,但需要更多的计算能力。迭代将主要通过更高质量的数据、更好的算法和更精确的微调来实现。Altman还透露,GPT-4 将能够更好地处理上下文。
编程AI模型Codex 的 API 访问权限已于几周前对第一批测试人员开放。Altman 称,Codex模型将通过用户反馈不断改进,因此,团队当前的重点是 Codex,可用的计算能力将用于进一步开发该模型。Altman说,Codex距离彻底改变程序员的工作只需不到一年的时间。
当被问及之前的项目在财务上是否成功时,Altman 表示 API 访问 Codex 和 GPT-3 是有利可图的,但还不足以支付下一代 AI开发的费用。
关于多模态模型和DALL-E,Altman 确认 DALL-E 在处理自然语言方面无法超越纯文本模型。然而,他预计未来几年多模态模型将在语言生成方面抛开纯文本模型。如果这没有发生,OpenAI 押注多模态 AI 模型的性能就会受到质疑。对于未来,Altman 希望拥有众多多模态模型,这些模型将针对教育、法律、生物学或治疗等特定领域进行训练。
Altman 表示,OpenAI 目前正在提高小型人工智能系统的效率。因此,可能不需要具有更大维度的 AI 模型。Altman 说,在未来,许多人会惊讶于没有参数增长的人工智能会变得多么强大。
关于通用人工智能,Altman 不认为计算能力是可能的瓶颈:在有了足够的投资后,通用人工智能所需的硬件可能已经具备。他表示,除了更大的人工智能模型,最需要的是算法的科学突破。意识和智力是否可以分开也很重要。Altman 将这个问题描述为 AI 研究的核心伦理。
共有250人参与了与Altman的在线对话,他们大多来自LessWrong社区。LessWrong用户事后在该社区发布了对话摘要,但在 Altman 的要求下删除了,因为他希望这是一次非正式的交流。