• 我的订阅
  • 科技

OpenAI CEO:大语言模型规模已接近极限,并非越大越好

类别:科技 发布时间:2023-04-16 20:35:00 来源:浅语科技

OpenAI的联合创始人兼CEO萨姆・奥尔特曼(SamAltman)在麻省理工学院“想象力行动”活动上接受了采访,谈到了大语言模型(LLM)的发展趋势和安全问题。

OpenAI CEO:大语言模型规模已接近极限,并非越大越好

奥尔特曼认为,我们正在接近LLM规模的极限,规模越大并不一定意味着模型越好,而可能只是为了追求一个数字而已。LLM的规模不再是衡量模型质量的重要指标,未来将有更多的方式来提升模型的能力和效用。他将LLM的规模与过去芯片速度的竞赛进行了类比,指出今天我们更关注芯片能否完成任务,而不是它们有多快。他表示,OpenAI的目标是为世界提供最有能力、最有用、最安全的模型,而不是为了参数数量而自我陶醉。

注意到,奥尔特曼还回应了一封要求OpenAI暂停开发更强大AI六个月的公开信,他表示他同意在能力越来越强大的情况下,安全标准也要提高,但他认为信件缺乏技术细节和准确性。他说,OpenAI在发布GPT-4之前已经花了六个月以上的时间来研究安全问题,并邀请外部审计和“红队”来测试模型。“我也同意,随着能力变得越来越强,安全标准必须提高。但我认为这封信缺少了关于我们需要暂停的大部分技术上的细微差别——这封信的早期版本声称我们正在训练GPT-5。我们没有,而且在一段时间内也不会,所以从这个意义上说,这有点愚蠢。但我们在GPT-4的基础上还在做其他事情,我认为这些事情有各种安全问题需要解决,但信中完全没有提到。因此,我认为谨慎行事,并对安全问题越来越严格,这一点非常重要。我不认为(信中的)建议是解决这个问题的最终方法,”他说。

奥尔特曼说,OpenAI已经在这个领域工作了七年,付出了很多努力,而大多数人都不愿意这样做。他说,他愿意公开讨论安全问题和模型的局限性,因为这是正确的事情。他承认有时候他和其他公司代表会说一些“蠢话”,结果发现是错误的,但他愿意冒这个风险,因为这项技术需要对话。

以上内容为资讯信息快照,由td.fyun.cc爬虫进行采集并收录,本站未对信息做任何修改,信息内容不代表本站立场。

快照生成时间:2023-04-17 00:45:48

本站信息快照查询为非营利公共服务,如有侵权请联系我们进行删除。

信息原文地址:

OpenAI发布文生视频模型Sora,奥尔特曼选取网友提示词
...凌晨,OpenAI再次扔出一枚深水炸弹,发布了首个文生视频模型Sora。据介绍,Sora可以直接输出长达60秒的视频
2024-02-16 18:44:00
实现AGI之前 全球AI大佬在这4个关键问题上吵起来了
...来5年内,头脑正常的人都不会再用自回归LLM(大型语言模型),GPT系统将很快被抛弃。”这是图灵奖得主、Meta首席AI科学家
2023-06-13 15:03:00
小模型正在成为AI界的新宠
...学习的复杂性直接相关。模型容量越大,往往意味着性能越好。随着模型容量增加到数万亿个参数,大模型可以捕捉更复杂的模式,从而在自然语言处理、计算机视觉和其他任务上表现更好,具备更
2024-06-24 09:42:00
OpenAI奥尔特曼罕见发长文:超级AI可能在几千天内实现|钛媒体AGI
...一些:深度学习奏效了,而且随着规模的扩大,效果越来越好,我们为此投入了越来越多的资源。就是这样。人类发现了一种算法,它可以真正地学习任何数据分布(或者说,产生任何数据分布的基
2024-09-24 18:15:00
openai开始招聘安卓、苹果ios工程师
...2022年11月30日上线,在短短两个月内获得1亿用户,而它AI模型和算法的背后,则是英伟达的人工智能硬件。据介绍
2023-04-18 20:46:00
微软开发者大会简报:编程进入自然语言时代、“AI员工”闪亮登场
...唯一渠道是在高通官网上填写一个面向开发者的表格。小模型也要多模态在今年4月更新“小模型”Phi-3后,微软也在周二拿出了Phi-3-vision模型。顾名思义,这个模型可以阅
2024-05-22 09:26:00
硅谷热议人工智能“奇点”:机器超越人类的时代是否已到来?
...目前,人们对人工智能和奇点的关注主要集中在大型语言模型的发展上,但人们对这些模型是否真正代表了奇点所承诺的指数级智能增长仍存在争议。数十年来,硅谷一直在期待一种新技术的出现,
2023-07-12 15:14:00
...特曼被誉为“ChatGPT之父”。2022年11月,OpenAI推出大语言模型ChatGPT,掀起了生成式人工智能的热潮
2024-01-21 07:35:00
假如太阳有足球大小,太阳系有多大?有没有一个足球场大?
...小,那么按着这1:110900的缩小比例,太阳系就会被缩小到模型中的0.13厘米,一个卡塔尔足球场足够太阳系中的各大行星和卫星“挥洒自如”,而太阳也能在这个模型中起到制约作用
2024-05-27 15:32:00
更多关于科技的资讯: