• 我的订阅
  • 科技

GPT-4不仅性能更强也更贵了:单次输出7.5万单词需6美元,是此前的30倍

类别:科技 发布时间:2023-03-15 21:00:00 来源:搜狐科技

出品 | 搜狐科技

作者 | 梁昌均

编辑 | 杨锦

基于GPT-3.5的ChatGPT带来的讨论余温未散,更强大的GPT-4又来了。这一次,人们关注的焦点也从“我会失业吗?”转为“我要失业了!”

3月15日凌晨,OpenAI正式发布多模态大模型GPT-4,它可以接受图像和文本输入。虽然在许多现实世界场景中的能力不如人类,但在各种专业和学术基准上表现出人类水平,比如在法律考试中可以打败90%的人类。

不过,GPT-4仍存和此前模型相似的局限性,仍然不完全可靠,存在事实性“幻觉”并出现推理错误,可能自信地在其预测中犯错。同时,它的使用价格也更贵,其API价格是Chat-GPT API 使用价格的15-30倍。

GPT-4实现多项突破,晋升“考霸”

相较GPT-3.5,GPT-4在多个方面实现飞跃式提升:增加了强大的识图能力,长度限制提升到32Ktokens,即能处理超过25000个单词的文本,并且可以使用长格式内容创建、扩展对话、文档搜索和分析等,同时回答准确性显著提高,同时能够生成歌词、创意文本等。

OpenAI表示,当任务的复杂性达到足够的阈值时,GPT-4就展现得比GPT-3.5更可靠、更有创意,并且能够处理更细微的指令。

为了解这两种模型之间的差异,OpenAI在各种基准测试上进行了测试,包括最初为人类设计的模拟考试。它以高分通过各种标准化考试,如SAT拿下700分,GRE几乎满分。在律师模拟考试中,ChatGPT背后的GPT-3.5排名在倒数10%左右,而GPT-4考到了前10%左右,即打败了90%的人类考生。

GPT-4不仅性能更强也更贵了:单次输出7.5万单词需6美元,是此前的30倍

OpenAI还在为机器学习模型设计的传统基准上评估了GPT-4。GPT-4大大优于现有的大型语言模型,以及大多数SOTA模型。

GPT-4不仅性能更强也更贵了:单次输出7.5万单词需6美元,是此前的30倍

在其他语言能力方面,OpenAI研究团队使用AzureTranslate将MMLU基准——一套涵盖57个主题的14000个多项选择题翻译成多种语言。在测试的26种语言的24种中,GPT-4优于GPT-3.5和其他大语言模型(Chinchilla、PaLM)的英语语言性能,包括拉脱维亚语、威尔士语、斯瓦希里语等少数语言。

GPT-4不仅性能更强也更贵了:单次输出7.5万单词需6美元,是此前的30倍

此外,GPT-4还可以接受文本和图像形式的prompt,新能力与纯文本设置并行,允许用户指定任何视觉或语言任务。它在人类给定由散布的文本和图像组成的输入的情况下生成相应的文本输出(自然语言、代码等)。

在一系列领域,包括带有文本和照片的文档、图表或屏幕截图上,GPT-4展示了与纯文本输入类似的功能。它还可以通过为纯文本语言模型开发的测试时间技术得到增强,包括少样本和思维链prompt。

根据OpenAI的展示,GPT-4看起来不会再胡言乱语,且在简单的数学和物理题上能作出正确解答,同时可以“看图说话”。不过,目前图像输入是研究预览,仍不公开。

真实性提升40%,但并不完全可靠

OpenAI称其团队花了6个月的时间,使用对抗性测试程序和从ChatGPT得到的经验教训,对GPT-4进行迭代调整,在真实性、可控制性等方面取得了有史以来最好的结果,但仍远非完美。

过去两年里,OpenAI重建了整个深度学习堆栈,并与微软Azure云平台一起为其工作负载从头开始共同设计了一台超级计算机。一年前,OpenAI训练GPT-3.5作为系统的第一次“试运行”,发现并修复了一些错误并改进了其理论基础。结果GPT-4训练运行前所未有地稳定,成为OpenAI能够提前准确预测其训练性能的第一个大型模型。

随着继续专注于可靠的扩展,OpenAI的目标是完善其方法,以帮助自身越来越多地提前预测和准备未来的能力,OpenAI认为这对安全至关重要。

与以前的GPT模型一样,GPT-4基础模型经过训练可以预测文档中的下一个单词,并且使用公开可用的数据(例如互联网数据)以及OpenAI已获得许可的数据进行训练。这些数据是网络规模的数据语料库,包括数学问题的正确和错误解决方案、弱推理和强推理、自相矛盾和一致的陈述,并代表各种各样和想法。

尽管功能更加强大,但GPT-4与早期的GPT模型具有相似的局限性。最重要的是,它仍然不完全可靠,存在事实性“幻觉”并出现推理错误。OpenAI建议,在使用语言模型输出时应格外小心,特别是在高风险上下文中,使用符合特定用例需求的确切协议(如人工审查、附加上下文的基础或完全避免高风险使用)。

不过,GPT-4相对于以前的模型显著减少了幻觉。在OpenAI的内部对抗性真实性评估中,GPT-4的得分比GPT-3.5高40%。

GPT-4不仅性能更强也更贵了:单次输出7.5万单词需6美元,是此前的30倍

同时,GPT-4普遍缺乏对绝大部分数据中断后,即2021年9月以后发生的事件的了解,也没有从经验中吸取教训。它有时会犯一些简单的推理错误,这些错误似乎与跨多个领域的能力不相称,或者在接受用户明显的虚假陈述时过于轻信。有时它会像人类一样在难题上失败,例如在它生成的代码中引入安全漏洞。GPT-4也可能自信地在其预测中犯错,在可能出错时没有仔细检查工作。

因此GPT-4也会带来与之前模型类似的风险,例如生成有害建议、错误代码或不准确信息,其附加功能会带来新的风险面。为此OpenAI聘请了50多位来自AI对齐风险、网络安全、生物风险、信任和安全以及国际安全等领域的专家来对模型进行对抗性测试,使OpenAI能够在需要专业知识进行评估的高风险领域测试模型行为,这些反馈和数据将用于模型改进。

OpenAI称,与GPT-3.5相比,其缓解措施显著改善了GPT-4的许多安全特性,已将模型响应禁止内容请求的可能性降低了82%,并且GPT-4根据OpenAI的政策响应敏感请求(如医疗建议和自我伤害)的频率提高了29%。

GPT-4不仅性能更强也更贵了:单次输出7.5万单词需6美元,是此前的30倍

OpenAI表示,GPT-4和后续模型有可能以有益和有害的方式对社会产生重大影响。OpenAI正在与外部研究人员合作,以改进理解和评估潜在影响的方式,以及对未来系统中可能出现的危险功能进行评估,并将很快分享更多关于GPT-4和其他AI系统的潜在社会和经济影响的想法。

开放GPT-4API,ChatGPT升级价格是此前的15倍-30倍

OpenAI还表示正在开源OpenAIEvals软件框架,它被用于创建和运行基准测试以评估GPT-4等模型,同时可以逐样本地检查模型性能。

在GPT-4发布后,OpenAI直接升级了ChatGPT,并对外开放API。要访问GPT-4API(它使用与gpt-3.5-turbo相同的ChatCompletionsAPI),用户可以注册等待。获得访问权限后,用户目前可以向GPT-4模型发出纯文本请求(图像输入仍处于有限的alpha阶段)。

至于价格方面,定价为每1k个prompt token0.03美元,每1k个completion token0.06美元。按100个token对应约75个英文单词计算,即每次输入7.5万个单词需要3美元,输出7.5万个单词需要6美元。此前ChatGPT基于gpt-3.5-turbo的API使用成本是75万个单词2美元,也就是说此次ChatGPT升级后的使用成本是此前的15倍-30倍。

GPT-4默认速率限制为每分钟40k个token和每分钟200个请求,上下文长度为8192个token。OpenAI还提供了32768个token上下文(约50页文本)版本的有限访问,该版本也将随着时间自动更新(当前版本gpt-4-32k-0314,也支持到6月14日),定价为每1Kprompt token0.06美元和每1kcompletion token0.12美元。

在应用方面,GPT-4已与多邻国、By My Eyes、Stripe等应用开发者进行合作。此外,微软新款的必应(Bing)搜索引擎也已经运行于GPT-4系统之上,后续其他业务后也不排除使用GPT-4技术。返回搜狐,查看更多

责任编辑:

以上内容为资讯信息快照,由td.fyun.cc爬虫进行采集并收录,本站未对信息做任何修改,信息内容不代表本站立场。

快照生成时间:2023-03-15 21:45:06

本站信息快照查询为非营利公共服务,如有侵权请联系我们进行删除。

信息原文地址:

文生图参数量升至240亿!Playground v3发布:深度融合LLM,图形设计能力超越人类
...ansformer模型中的每层捕捉到的表示不同,包含不同级别的单词级和句子级信息,标准做法是使用T5编码器或CLIP文本编码器的最后一层输出,或是结合倒数第二层的输出,不过,
2024-10-08 09:48:00
深挖 ChatGPT 原理,保姆级解说!
...符号集合作为输出。下面是结构化符号集合的一些示例:单词中的字母句子中的单词图像中的像素视频中的帧将一个符号集合转换为另一个相关符号集合的方法有很多种,这些方法并不限于计算机程
2023-03-15 05:00:00
LeCun最新万字演讲:纯语言模型到不了人类水平,我们基本已放弃
...过损坏再重建恢复。例如,你可以取一段文本,通过删除单词或更改其他单词来损坏它,这可以是文本、DNA序列、蛋白质或其他任何东西,甚至在一定程度上可以是图像。然后,你训练一个大型
2024-10-18 09:42:00
聊天机器人目前还不理解的一件事:“否定”
...型构建为神经网络:一种评估对象(在语言模型中指的是单词)如何相互关联的统计模型。每一种语言关系都有一定的权重,而这种权重在训练过程中会经过微调。例如,“老鼠”与“啮齿动物”的
2023-06-08 14:56:00
刚炮轰完GPT模式 杨立昆推出首个“世界模型”
...来学习,例如删除照片的一部分或隐藏文本段落中的一些单词。然后,他们尝试预测损坏或丢失的像素或单词。然而,生成式AI方法的一个显著缺点是,模型试图填补每一点缺失的信息,即使世界
2023-06-14 18:02:00
Meta提出“可持续思维链”,让大模型在连续潜空间中推理
...队认为,语言空间并不总是最佳推理空间。例如,大多数单词 token 主要是为了保持文本的连贯性,对推理并不重要,而一些关键 token 则需要复杂的规划
2024-12-13 09:19:00
首个可保留情感的音频LLM!Meta重磅开源7B-Spirit LM,一网打尽「音频+文本」多模态任务
...leaving Speech and Text)对于对齐的语音+文本数据集,通过在单词级别交错语音和文本来混合:[TEXT]the cat [SPEECH][Hu3][Hu7]
2024-11-23 09:43:00
Sora“超级涌现力”将把AI引向何方
...关联组合。比如,在保持连贯的上下文语境中,对若干个单词进行有意义组合,从而连缀成一个会意句子;在保持合理的空间布局下,对众多图像小块进行有意义组合,拼合为一幅精彩图像;在保持
2024-02-24 05:43:00
对话伯克利顶级学者Stuart Russell:AI或在各方面超人类,对人类生存构成威胁
...Hidden Markov Model,简称HMM)”。他在一部戏剧中通过计算单词对建立了一个语言模型。他观察了戏剧中的每一对单词
2023-06-14 13:00:00
更多关于科技的资讯:
中新经纬2月11日电 据国家市场监督管理总局网站消息,2月4日,国务院反垄断反不正当竞争委员会印发施行《关于公用事业领域的反垄断指南》(以下简称《指南》)
2026-02-11 20:18:00
季季有主题,周周有优惠!2026年河北省电影惠民观影促消费活动启动
河北日报客户端讯(记者肖煜)为积极响应落实国家电影局全国电影惠民消费季安排,进一步激活河北电影市场消费潜力,丰富群众文化生活
2026-02-11 22:05:00
2025国际宠物博览会落幕:Benarmi倡导全生命周期健康管理
12月20日,2025国际宠物博览会在北京市平谷区博物馆、体育中心拉开帷幕,汇聚全球名宠、产业企业与创新项目,集中展现宠物经济的前沿动态与发展趋势
2026-02-11 20:08:00
“民生科幻”领军人吴楚新作《背叛文明》出版,聚焦星际外交博弈
如果高等文明的馈赠是一颗带毒的蜜糖,那人类是否有智慧拒绝唾手可得的诱惑?当思想需要向未来跨出一大步时,阅读科幻依然是当下最高效的途径
2026-02-11 17:22:00
随着云计算、大数据、人工智能等数智技术的迅猛发展,传统劳动形态正经历着前所未有的变革。工作场所的虚拟化、劳动时间的弹性化以及用工关系的多元化
2026-02-11 17:31:00
厦门城市可信数据空间开放试运行推出“马上有数”进驻激励计划 首发5个月资源免费共享东南网2月11日讯 (海峡导报记者 康泽辉) 近日
2026-02-11 17:50:00
元梦空间荣膺两项大奖 闪耀2025人工智能未来设计大赛
2025年11月10日,由工业和信息化部工业文化发展中心主办的2025“人工智能未来设计大赛”全国总决赛在山西太原圆满落幕
2026-02-11 17:50:00
【寒假摘镜总动员】选择哪种近视手术方式?——济南普瑞眼科王晓雪主任为您专业解析
视力是体检中至关重要的一环。选择一种既安全稳定、又符合体检标准的近视手术方式,是实现梦想的关键一步。济南普瑞眼科作为山东省首批蔡司全飞秒4
2026-02-11 17:51:00
潮新闻讯 随着人工智能兴起,数据要素领域的生产性服务业,规模正迅速壮大。近日,浙江省委副书记、省长刘捷在杭州专题调研服务业发展工作
2026-02-11 17:58:00
俊小白与上海吴淞材料实验室联合成立实验室
中国消费者报北京讯(记者孙蔚)近日,上海吴淞材料实验室与国货科创口腔护理品牌俊小白联合成立的个人护理功能介孔材料联合实验室正式落成
2026-02-11 18:06:00
大皖新闻讯 大皖新闻记者从国先中心(合肥)了解到,日前,零次方机器人率先完成中国信通院“可信AI”具身智能基准测试(EAI Bench)
2026-02-11 18:18:00
2月5日,中国消费者协会公布了2025年全国消协组织受理投诉情况统计数据,去年全国消协组织共受理消费者投诉2016448件
2026-02-11 18:06:00
职场人年货买什么?食品类、数码类需求上升
日前,智联招聘发布《职场人春节生存图鉴调研报告》,呈现职场人在春节前后的工作状态、社交压力、休闲计划等。春节前后通常是离职高峰期
2026-02-11 19:14:00
2025年,安徽太和县烟草专卖局(营销部)紧扣行业高质量发展要求,以“强基固本、提质增效”为主线,深化终端现代化转型,在数字化赋能
2026-02-11 14:18:00
从技术到情感,2026值得入手的定制珠宝品牌,一文读懂不踩坑
一、定制珠宝为何成为新消费时代的“刚需”?过去几年,全球珠宝产业正经历一场由内而外的结构性重塑。根据《2026全球珠宝行业白皮书》披露的数据
2026-02-11 14:20:00