• 我的订阅
  • 科技

OpenAI CEO:大语言模型规模已接近极限,并非越大越好

类别:科技 发布时间:2023-04-16 20:35:00 来源:浅语科技

OpenAI的联合创始人兼CEO萨姆・奥尔特曼(SamAltman)在麻省理工学院“想象力行动”活动上接受了采访,谈到了大语言模型(LLM)的发展趋势和安全问题。

OpenAI CEO:大语言模型规模已接近极限,并非越大越好

奥尔特曼认为,我们正在接近LLM规模的极限,规模越大并不一定意味着模型越好,而可能只是为了追求一个数字而已。LLM的规模不再是衡量模型质量的重要指标,未来将有更多的方式来提升模型的能力和效用。他将LLM的规模与过去芯片速度的竞赛进行了类比,指出今天我们更关注芯片能否完成任务,而不是它们有多快。他表示,OpenAI的目标是为世界提供最有能力、最有用、最安全的模型,而不是为了参数数量而自我陶醉。

注意到,奥尔特曼还回应了一封要求OpenAI暂停开发更强大AI六个月的公开信,他表示他同意在能力越来越强大的情况下,安全标准也要提高,但他认为信件缺乏技术细节和准确性。他说,OpenAI在发布GPT-4之前已经花了六个月以上的时间来研究安全问题,并邀请外部审计和“红队”来测试模型。“我也同意,随着能力变得越来越强,安全标准必须提高。但我认为这封信缺少了关于我们需要暂停的大部分技术上的细微差别——这封信的早期版本声称我们正在训练GPT-5。我们没有,而且在一段时间内也不会,所以从这个意义上说,这有点愚蠢。但我们在GPT-4的基础上还在做其他事情,我认为这些事情有各种安全问题需要解决,但信中完全没有提到。因此,我认为谨慎行事,并对安全问题越来越严格,这一点非常重要。我不认为(信中的)建议是解决这个问题的最终方法,”他说。

奥尔特曼说,OpenAI已经在这个领域工作了七年,付出了很多努力,而大多数人都不愿意这样做。他说,他愿意公开讨论安全问题和模型的局限性,因为这是正确的事情。他承认有时候他和其他公司代表会说一些“蠢话”,结果发现是错误的,但他愿意冒这个风险,因为这项技术需要对话。

以上内容为资讯信息快照,由td.fyun.cc爬虫进行采集并收录,本站未对信息做任何修改,信息内容不代表本站立场。

快照生成时间:2023-04-17 00:45:48

本站信息快照查询为非营利公共服务,如有侵权请联系我们进行删除。

信息原文地址:

OpenAI发布文生视频模型Sora,奥尔特曼选取网友提示词
...凌晨,OpenAI再次扔出一枚深水炸弹,发布了首个文生视频模型Sora。据介绍,Sora可以直接输出长达60秒的视频
2024-02-16 18:44:00
实现AGI之前 全球AI大佬在这4个关键问题上吵起来了
...来5年内,头脑正常的人都不会再用自回归LLM(大型语言模型),GPT系统将很快被抛弃。”这是图灵奖得主、Meta首席AI科学家
2023-06-13 15:03:00
openai开始招聘安卓、苹果ios工程师
...2022年11月30日上线,在短短两个月内获得1亿用户,而它AI模型和算法的背后,则是英伟达的人工智能硬件。据介绍
2023-04-18 20:46:00
...特曼被誉为“ChatGPT之父”。2022年11月,OpenAI推出大语言模型ChatGPT,掀起了生成式人工智能的热潮
2024-01-21 07:35:00
硅谷热议人工智能“奇点”:机器超越人类的时代是否已到来?
...目前,人们对人工智能和奇点的关注主要集中在大型语言模型的发展上,但人们对这些模型是否真正代表了奇点所承诺的指数级智能增长仍存在争议。数十年来,硅谷一直在期待一种新技术的出现,
2023-07-12 15:14:00
昨晚一家机器人AI公司悄然成立 OpenAI、红杉参与创办
...师、科学家、机器人专家和创业者组成,致力于开发基础模型和学习算法,为当今的机器人和未来的物理驱动设备提供动力。公司在简陋的官网上写道
2024-03-14 02:00:00
OpenAI没有放弃的机器人梦想
... :“一种可能准确但带有讽刺意味的观点是,研究语言模型比研究机器人学具有更高的投资回报率和更低的风险。”事实证明,OpenAI的确在大语言模型方面取得了更大突破。不过,Ope
2024-03-18 10:00:00
...论文,明确表示训练大语言模型用的数据越多,表现就会越好。自那以后,“规模就是一切”成为了人工智能行业的信条。2020年11月发布的GPT-3包含约3000亿个Token的训练数据
2024-04-07 22:22:00
超30个国产大模型混战:华为百度阿里腾讯,谁能成为“中国的OpenAI”?
...10万亿级别。但越来越多的观点认为,大模型并不是越大越好,或者说在参数继续增加的同时要更加关注如何提升模型的能力。OpenAI首席执行官山姆·奥特曼近日就提到,OpenAI正
2023-04-18 13:00:00
更多关于科技的资讯: