ChatGPT之父:巨型人工智能模型时代已结束
2023/05/25 | via.媒体  美国《连线》月刊网站 | 收藏本文
初创公司开放人工智能研究中心(OpenAI)推出的聊天机器人ChatGPT(聊天生成预训练转换器)的功能令人惊叹,这促使外界对人工智能领域的兴趣和投资激增。但最近,该公司首席执行官萨姆·奥尔特曼发出警告称:创造这款机器人的研究战略已经失去效用。
近年来,OpenAI采用现有的机器学习算法,并将之扩大到以前难以想象的规模,在人工智能语言模型领域取得了一系列令人印象深刻的进展。该公司在训练这些项目中的最新模型GPT-4时,可能利用了数以万亿计的文本文字和数以千计功率强大的计算机芯片。这个过程需要超过1亿美元的开支。
但奥尔特曼说,即使扩大模型规模,也不会取得更大进展了。不久前,他在美国麻省理工学院举办的一次活动中告诉人们:“我认为,我们已处于这种巨型模型时代的末期。我们会用其他方法改进它们。”
奥尔特曼的断言表明,在开发和应用新的人工智能算法的竞赛中出现了意想不到的转折。自去年11月ChatGPT出现后,微软公司利用其底层技术为必应搜索引擎增加了聊天机器人功能;谷歌公司推出了与必应竞争的聊天机器人“巴德”。很多人一拥而上,尝试用新一代聊天机器人协助完成工作或个人任务。
与此同时,无数资金充裕的初创公司正在斥巨资打造规模更大的算法,努力追赶OpenAI的技术。OpenAI在稍加升级GPT-3的基础上推出了ChatGPT的最初版本,而用户能够使用功能更强大的GPT-4驱动的版本。
奥尔特曼发表的声明表明,GPT-4可能是OpenAI的战略——扩大模型规模并为之提供更多数据——能够产生的最后一项重大进展。他没说哪种研究战略或技术可能会取而代之。OpenAI在描述GPT-4的论文中说,它的预测表明,扩大模型规模的收益在减少。奥尔特曼说,公司能够建立的数据中心的数量以及建设速度,也存在客观限制。
相关报道