• 我的订阅
  • 财经

推理性能提升30倍!英伟达发布史上最强AI芯片,黄仁勋:将成最成功产品

类别:财经 发布时间:2024-03-19 08:53:00 来源:澎湃新闻

万众瞩目的英伟达GPU技术大会(GTC)如期举行,备受期待的最新AI芯片也被如期推出。

当地时间3月18日,黄仁勋发表主题演讲《见证AI的变革时刻》。在两个小时的演讲中,黄仁勋围绕五大板块,介绍了英伟达的最新研发进展:新的产业发展、Blackwell平台、创新软件NIMs、AI平台NEMO和AI工坊(AI foundry)服务,以及仿真平台Omniverse和适用于自主移动机器人的Isaac Robotics平台。

推理性能提升30倍!英伟达发布史上最强AI芯片,黄仁勋:将成最成功产品

黄仁勋在演讲中重点介绍的五大板块。英伟达直播截图

毫不夸张地说,英伟达本次GTC大会可能决定美股科技股的未来命运。英伟达股价在19日当天早盘一度上涨超过4%,随后回落,收于每股884.55美元,涨0.7%,总市值2.21万亿美元。

在大会现场,18日下午四点,身穿经典黑色皮衣的黄仁勋登台亮相。面对座无虚席的美国加州圣何塞SAP中心,他笑着说道“希望你们知道,这可不是一场演唱会”。

随后,黄仁勋用一张手绘图回顾了计算机产业的发展史,以及英伟达的发家史。从1964年IBM推出世界首个通用计算机开始,伴随着Windows 95、加速计算乃至深度学习模型AlexNet的出现,再到2016年,黄仁勋亲手将第一台DGX-1超级计算机送给了OpenAI。而在2022年,随着聊天机器人ChatGPT横空出世,生成式AI带来了全新一轮产业革命。

推理性能提升30倍!英伟达发布史上最强AI芯片,黄仁勋:将成最成功产品

黄仁勋手绘计算机发展史。英伟达直播截图

随后,便到了本次主题演讲众望所归的大戏:最新一代AI芯片Blackwell GPU的亮相。

黄仁勋一边说着“Hopper很棒,但我们需要更大的GPU”,一边在现场展示了英伟达的首款Blackwell芯片。这款芯片被命名为B200,计划于今年晚些时候上市。

英伟达目前按照平均两年一次的更新频率升级GPU架构,对产品性能进行大幅提升。英伟达于2022年发布了基于Hopper架构的H100加速卡,而现在推出基于Blackwell的加速卡在性能上也得到了全面提升,更擅长处理AI相关任务。

从外观来看,Blackwell GPU的体积明显大于H100,采用台积电的4纳米(4NP)工艺蚀刻而成,整合了两个独立制造的裸晶(Die),共有2080亿个晶体管。英伟达使用传输速度达到10 TB每秒的NVLink 5.0技术来连接每块裸晶。

推理性能提升30倍!英伟达发布史上最强AI芯片,黄仁勋:将成最成功产品

左边B200,右边H100。英伟达直播截图

据黄仁勋介绍,一个B200 GPU能够从其2080亿个晶体管中提供高达20 petaflops(每秒千万亿次浮点运算)的FP4八精度浮点运算能力。相比之下,英伟达H100芯片所包含的晶体管数量为800亿个,提供4 petaflops的FP4八精度浮点运算能力。

在此基础上,一个GB200加速卡结合了两个B200 GPU和一个独立的Grace CPU,将能够使大模型推理工作负载的性能提升30倍,同时提高效率。相比于H100,它可以“将成本和能源消耗降至1/25”。

这就意味着,以前训练一个拥有1.8万亿参数的模型需要8000个Hopper GPU 和15兆瓦的功耗。而今天,黄仁勋表示,同样的工作只需要2000个Blackwell GPU就能完成,功耗仅为4兆瓦。同时,取决于各种Blackwell设备的内存容量和带宽配置,工作负载的实际性能可能会更高。

推理性能提升30倍!英伟达发布史上最强AI芯片,黄仁勋:将成最成功产品

黄仁勋展示GB200加速卡开发板(左侧),称其“可能价值100亿美元”。来源:英伟达直播截图

而在参数为1750亿的GPT-3 LLM基准测试中,GB200的性能达到了H100的7倍,而训练速度则达到了H100的4倍。

对此,黄仁勋也自豪地晒出了AI芯片技术的发展图,并表示:“在过去,计算能力平均每十年性能提升100倍。而在过去的八年中,我们已经将性能提升了1000倍,距离十年还有两年。”

推理性能提升30倍!英伟达发布史上最强AI芯片,黄仁勋:将成最成功产品

AI芯片技术的发展图。英伟达直播截图

英伟达还将面向有大型需求的企业提供成品服务,例如体积庞大的GB200 NVL72服务器,共包含36个CPU和72个Blackwell GPU,并提供完整的一体水冷散热方案,可实现总计720 petaflops的AI训练性能,或高达1440 petaflops的推理性能。其内部使用的电缆长度累计接近2英里,共有5000条独立电缆。

不过,英伟达并没有公布关于B200和其相关产品的价格,只表示亚马逊、谷歌、微软和甲骨文等公司都已计划在其云服务产品中装配NVL72机架,但没有公布这些公司的购买数量,只透露了亚马逊AWS已计划采购由2万片GB200芯片组建的服务器集群,可以部署27万亿个参数的模型。

黄仁勋表示,Blackwell带来了“令人难以置信的兴奋”:“我们将会把Blackwell推广给全球的AI公司,现在有很多这样的公司都在不同领域做着令人惊奇的工作……全球各地都在签约启动Blackwell,这款Blackwell将成为我们历史上最成功的产品发布。”

推理性能提升30倍!英伟达发布史上最强AI芯片,黄仁勋:将成最成功产品

GB200 NVL72服务器的外观和内部。英伟达直播截图

在硬件之外,英伟达在AI软件领域也取得了新的进展。

黄仁勋宣布,英伟达推出数十项企业级生成式AI微服务,其中最新的NIM微服务,可适用于对英伟达及合作伙伴生态系统中20多个热门的AI模型进行推理优化。这些云原生微服务目录在英伟达CUDA平台上开发,企业可以利用这些微服务在自己的平台上创建和部署定制应用,同时保留对知识产权的完整所有权和控制权。

其中,重点介绍的NIM微服务将提供基于英伟达推理软件的预构建容器,使开发者能够将部署时间从几周缩短至几分钟,并为语言、语音和药物发现等领域提供行业标准API,使开发者能够利用在自己基础设施中的专有数据来快速构建AI应用,而不是在云服务器上运行。

英伟达希望通过这些服务来吸引购买英伟达服务器的客户来注册英伟达企业版NVIDIA AI Enterprise 5.0,对每个GPU每年收取4500美元的费用。企业可以自己选择基础设施来部署这些微服务,包括亚马逊云科技(AWS)、谷歌云、Azure 和 Oracle Cloud Infrastructure 等云平台。超过400个英伟达认证系统也支持 NVIDIA 微服务,包括思科、戴尔科技、慧与(HPE)、惠普、联想和超微的服务器和工作站。

除了硬件和软件,黄仁勋还在演讲中花大篇幅来介绍英伟达的仿真平台Omniverse和适用于自主移动机器人的Isaac Robotics平台。

对于Omniverse,黄仁勋重点介绍了英伟达研究团队利用其在预测气候问题方面的进展。黄仁勋还提到,Omniverse Cloud将可以连接到苹果的混合现实(MR)头显Vision Pro。黄仁勋在现场展示了一款可以完全交互的汽车模型,能够通过流媒体技术传输到Vision Pro中。

关于机器人领域,黄仁勋在现场宣布,英伟达推出名为Project GROOT Foundation的AI模型,旨在创建性能更好的人形机器人。此外,还发布了一款专用于机器人的名为Thor的系统芯片。

黄仁勋表示:“机器人领域出现ChatGPT时刻的可能性近在咫尺,我们已经花了一段时间来构建端到端的机器人系统。”

以上内容为资讯信息快照,由td.fyun.cc爬虫进行采集并收录,本站未对信息做任何修改,信息内容不代表本站立场。

快照生成时间:2024-03-19 12:45:27

本站信息快照查询为非营利公共服务,如有侵权请联系我们进行删除。

信息原文地址:

...预计Meta可于年内完成该芯片在自有数据中心的部署,与英伟达GPU协同提供算力。该芯片是Meta去年宣布的内部芯片生产线的第二代产品,有助于减少Meta对占据市场主导地位的英
2024-02-03 21:39:00
英伟达推出史上最强AI芯片H200:推理性能提升90%,无缘中国市场
...狐科技作者 | 梁昌均在全球算力荒的情况下,AI芯片巨头英伟达加速算力竞赛。当地时间11月13日,英伟达宣布推出新一代人工智能芯片H200,称其是目前世界“最强”的AI芯片。
2023-11-14 14:05:00
从狂热到理性:大模型训练三堵墙,一场少数人的游戏 | 钛媒体深度
...达观数据自家购置一个自己的算力平台,达观数据选择了英伟达DGX高性能工作站方案,相当于英伟达自身做了很多集群优化,解决了存储和网络的大部分问题,直接买GPU卡自建集群和英伟达
2023-06-29 12:00:00
英伟达深夜炸场,世界最强AI芯片H200震撼发布,性能飙升90%
英伟达的节奏,越来越可怕了。就在刚刚,老黄又一次在深夜炸场——发布目前世界最强的AI芯片H200!较前任霸主H100,H200的性能直接提升了60%到90%
2023-11-14 13:41:00
英特尔推出新款AI芯片:推理性能比英伟达H100快50%
...750亿参数GPT-3模型的训练时间。英特尔表示,Gaudi 3能够比英伟达上一代H100处理器训练特定大型语言模型的速度快40%
2024-04-10 10:52:00
GPU受限,国内AI大模型能否交出自己的答卷?
...的算力资源,GPU是大模型的最佳算力发动机。截至目前,英伟达的GPU芯片正在为全球绝大多数的人工智能系统提供最基础的算力支持。那么,在GPU受限的情况下,国内AI行业发展境况
2023-04-14 18:02:00
英伟达H20重回市场,但中国芯片过去三个月已爆单
作者丨邱晓芬编辑丨苏建勋为了抢回中国的AI算力市场,英伟达创始人黄仁勋正进行一场意义重大的中国之行。此次黄仁勋行程满满,除了政府侧的拜访,他与小米创始人雷军的合照也已传遍网络。7
2025-07-16 19:39:00
Meta推出新版自研AI芯片:性能较上代提高三倍,降低对英伟达依赖
...排名和推荐系统而设计。分析指出,Meta的目标是降低对英伟达等芯片厂商的依赖。10日当天,Meta(Nasdaq:META)股价收于每股519
2024-04-11 12:44:00
AMD MI300绝杀英伟达H100?跑GPT-4性能超25%,AI芯片大决战一触即发
...芯片大决战,不少芯片初创公司跃跃欲试,希望一举打破英伟达的垄断地位。而AMD的MI300,在部署32K上下文窗口的GPT-4模型时
2023-11-06 15:12:00
更多关于财经的资讯:
瓮马铁路南北延伸线项目瓮安河大桥全桥连续刚构梁顺利合龙
记者从贵州铁投集团获悉,日前,瓮马铁路南北延伸线项目瓮安河大桥全桥连续刚构梁顺利合龙,项目建设再次迈出坚实一步,为全线如期建成通车奠定基础
2026-03-07 02:11:00
建发致新(301584)主要从事医疗器械直销及分销业务,并为终端医院提供医用耗材集约化运营(SPD)等服务,通过建立辐射全国范围的分销网络
2026-03-06 22:56:00
周五,A股震荡走高,市场逾4200股上涨,热点较为分散。美国缺电逻辑持续带动电网设备板块大涨,农业种植概念股、化工股、电池产业链
2026-03-06 22:56:00
2026年3月6日“大众30”成份股报告
中科星图股价本周涨逾一成本报综合消息 本周,大盘呈现探底后震荡企稳的走势,上证综指下跌0.93%,深证成指下跌2.22%
2026-03-06 22:56:00
3月6日晚间,桂林福达股份有限公司(下称“福达股份”,股票代码:603166)发布公告称,公司拟以自有资金400万美元(折合人民币2
2026-03-06 22:56:00
Wind数据显示,下周限售股上市数量共计21.1亿股,以3月6日收盘价计算,解禁市值约674亿元,与本周相比,数量减少
2026-03-06 22:56:00
十四届全国人大四次会议今天(6日)举行经济主题记者会。中国证券监督管理委员会主席吴清表示,将在创业板增设一套更加精准、更为包容的上市标准
2026-03-06 22:02:00
开奖啦!济南市第一期有奖发票活动中奖名单揭晓
春潮涌动消费旺开票抽奖享福利3月5日济南市第一期有奖发票活动迎来开奖日在泉城公证处公证员全程监督下抽奖系统从2月9日至28日期间开具
2026-03-06 17:10:00
工行贵阳清镇支行开展“进商场”宣传 帮市民把金融知识装进“购物袋”
多彩贵州网讯(通讯员 唐雍傑)为进一步提升社会公众的金融知识水平与风险识别能力,近日,工行贵阳清镇支行组织宣传小队走进人流量密集
2026-03-06 17:34:00
细微处显担当,温情中护成长:工行贵阳修文支行暖心服务守护童心金融梦
多彩贵州网讯(通讯员 文琳)“本以为给孩子开卡、清点零钱要耗上大半天,没想到你们这么有耐心,每一步都讲得明明白白,办理效率还这么高
2026-03-06 17:34:00
华为申请华为云码道商标,同名智能体公测版2月发布
近日,华为技术有限公司申请注册一枚"华为云码道"商标,国际分类为设计研究,当前商标状态为注册申请中。华为技术有限公司成立于1987年9月
2026-03-06 17:36:00
原豆包PC端产品负责人任新公司高管,从事AI智能应用
近日,此间无限(上海)智能科技有限公司成立,注册资本1000万美元,经营范围包含技术开发、人工智能行业应用系统集成服务、人工智能应用软件开发等,由今朝智华控股有限公司全资持股,原
2026-03-06 17:36:00
工行贵阳世纪金源支行携手龙盛社区共庆元宵 共筑安全
多彩贵州网讯(通讯员 江雪莲、冯宁利)马年元宵佳节临近,年味正浓。2026年3月2日,工行贵阳世纪金源支行党支部与龙盛社区党支部以党建为纽带
2026-03-06 18:05:00
温暖消保 与爱同行--光大银行贵阳分行开展2026年“3·15”消费者权益保护活动纪实
多彩贵州网讯(记者 金星)金融消费者权益保护,从来不是冰冷的制度条文,而是每一次设身处地的考量,每一回雪中送炭的奔赴。在2026年“3·15”国际消费者权益日到来之际
2026-03-06 18:06:00
工行凯里麻江支行:200万元金融“活水”润苗绣 “贷”动非遗锦绣前程
在贵州省黔东南州麻江县,丰富的非物质文化遗产与传统村落等文化资源在这里交相辉映,拥有三项国家级非物质文化遗产名录和11项省级非物质文化遗产名录
2026-03-06 18:06:00