• 我的订阅
  • 财经

推理性能提升30倍!英伟达发布史上最强AI芯片,黄仁勋:将成最成功产品

类别:财经 发布时间:2024-03-19 08:53:00 来源:澎湃新闻

万众瞩目的英伟达GPU技术大会(GTC)如期举行,备受期待的最新AI芯片也被如期推出。

当地时间3月18日,黄仁勋发表主题演讲《见证AI的变革时刻》。在两个小时的演讲中,黄仁勋围绕五大板块,介绍了英伟达的最新研发进展:新的产业发展、Blackwell平台、创新软件NIMs、AI平台NEMO和AI工坊(AI foundry)服务,以及仿真平台Omniverse和适用于自主移动机器人的Isaac Robotics平台。

推理性能提升30倍!英伟达发布史上最强AI芯片,黄仁勋:将成最成功产品

黄仁勋在演讲中重点介绍的五大板块。英伟达直播截图

毫不夸张地说,英伟达本次GTC大会可能决定美股科技股的未来命运。英伟达股价在19日当天早盘一度上涨超过4%,随后回落,收于每股884.55美元,涨0.7%,总市值2.21万亿美元。

在大会现场,18日下午四点,身穿经典黑色皮衣的黄仁勋登台亮相。面对座无虚席的美国加州圣何塞SAP中心,他笑着说道“希望你们知道,这可不是一场演唱会”。

随后,黄仁勋用一张手绘图回顾了计算机产业的发展史,以及英伟达的发家史。从1964年IBM推出世界首个通用计算机开始,伴随着Windows 95、加速计算乃至深度学习模型AlexNet的出现,再到2016年,黄仁勋亲手将第一台DGX-1超级计算机送给了OpenAI。而在2022年,随着聊天机器人ChatGPT横空出世,生成式AI带来了全新一轮产业革命。

推理性能提升30倍!英伟达发布史上最强AI芯片,黄仁勋:将成最成功产品

黄仁勋手绘计算机发展史。英伟达直播截图

随后,便到了本次主题演讲众望所归的大戏:最新一代AI芯片Blackwell GPU的亮相。

黄仁勋一边说着“Hopper很棒,但我们需要更大的GPU”,一边在现场展示了英伟达的首款Blackwell芯片。这款芯片被命名为B200,计划于今年晚些时候上市。

英伟达目前按照平均两年一次的更新频率升级GPU架构,对产品性能进行大幅提升。英伟达于2022年发布了基于Hopper架构的H100加速卡,而现在推出基于Blackwell的加速卡在性能上也得到了全面提升,更擅长处理AI相关任务。

从外观来看,Blackwell GPU的体积明显大于H100,采用台积电的4纳米(4NP)工艺蚀刻而成,整合了两个独立制造的裸晶(Die),共有2080亿个晶体管。英伟达使用传输速度达到10 TB每秒的NVLink 5.0技术来连接每块裸晶。

推理性能提升30倍!英伟达发布史上最强AI芯片,黄仁勋:将成最成功产品

左边B200,右边H100。英伟达直播截图

据黄仁勋介绍,一个B200 GPU能够从其2080亿个晶体管中提供高达20 petaflops(每秒千万亿次浮点运算)的FP4八精度浮点运算能力。相比之下,英伟达H100芯片所包含的晶体管数量为800亿个,提供4 petaflops的FP4八精度浮点运算能力。

在此基础上,一个GB200加速卡结合了两个B200 GPU和一个独立的Grace CPU,将能够使大模型推理工作负载的性能提升30倍,同时提高效率。相比于H100,它可以“将成本和能源消耗降至1/25”。

这就意味着,以前训练一个拥有1.8万亿参数的模型需要8000个Hopper GPU 和15兆瓦的功耗。而今天,黄仁勋表示,同样的工作只需要2000个Blackwell GPU就能完成,功耗仅为4兆瓦。同时,取决于各种Blackwell设备的内存容量和带宽配置,工作负载的实际性能可能会更高。

推理性能提升30倍!英伟达发布史上最强AI芯片,黄仁勋:将成最成功产品

黄仁勋展示GB200加速卡开发板(左侧),称其“可能价值100亿美元”。来源:英伟达直播截图

而在参数为1750亿的GPT-3 LLM基准测试中,GB200的性能达到了H100的7倍,而训练速度则达到了H100的4倍。

对此,黄仁勋也自豪地晒出了AI芯片技术的发展图,并表示:“在过去,计算能力平均每十年性能提升100倍。而在过去的八年中,我们已经将性能提升了1000倍,距离十年还有两年。”

推理性能提升30倍!英伟达发布史上最强AI芯片,黄仁勋:将成最成功产品

AI芯片技术的发展图。英伟达直播截图

英伟达还将面向有大型需求的企业提供成品服务,例如体积庞大的GB200 NVL72服务器,共包含36个CPU和72个Blackwell GPU,并提供完整的一体水冷散热方案,可实现总计720 petaflops的AI训练性能,或高达1440 petaflops的推理性能。其内部使用的电缆长度累计接近2英里,共有5000条独立电缆。

不过,英伟达并没有公布关于B200和其相关产品的价格,只表示亚马逊、谷歌、微软和甲骨文等公司都已计划在其云服务产品中装配NVL72机架,但没有公布这些公司的购买数量,只透露了亚马逊AWS已计划采购由2万片GB200芯片组建的服务器集群,可以部署27万亿个参数的模型。

黄仁勋表示,Blackwell带来了“令人难以置信的兴奋”:“我们将会把Blackwell推广给全球的AI公司,现在有很多这样的公司都在不同领域做着令人惊奇的工作……全球各地都在签约启动Blackwell,这款Blackwell将成为我们历史上最成功的产品发布。”

推理性能提升30倍!英伟达发布史上最强AI芯片,黄仁勋:将成最成功产品

GB200 NVL72服务器的外观和内部。英伟达直播截图

在硬件之外,英伟达在AI软件领域也取得了新的进展。

黄仁勋宣布,英伟达推出数十项企业级生成式AI微服务,其中最新的NIM微服务,可适用于对英伟达及合作伙伴生态系统中20多个热门的AI模型进行推理优化。这些云原生微服务目录在英伟达CUDA平台上开发,企业可以利用这些微服务在自己的平台上创建和部署定制应用,同时保留对知识产权的完整所有权和控制权。

其中,重点介绍的NIM微服务将提供基于英伟达推理软件的预构建容器,使开发者能够将部署时间从几周缩短至几分钟,并为语言、语音和药物发现等领域提供行业标准API,使开发者能够利用在自己基础设施中的专有数据来快速构建AI应用,而不是在云服务器上运行。

英伟达希望通过这些服务来吸引购买英伟达服务器的客户来注册英伟达企业版NVIDIA AI Enterprise 5.0,对每个GPU每年收取4500美元的费用。企业可以自己选择基础设施来部署这些微服务,包括亚马逊云科技(AWS)、谷歌云、Azure 和 Oracle Cloud Infrastructure 等云平台。超过400个英伟达认证系统也支持 NVIDIA 微服务,包括思科、戴尔科技、慧与(HPE)、惠普、联想和超微的服务器和工作站。

除了硬件和软件,黄仁勋还在演讲中花大篇幅来介绍英伟达的仿真平台Omniverse和适用于自主移动机器人的Isaac Robotics平台。

对于Omniverse,黄仁勋重点介绍了英伟达研究团队利用其在预测气候问题方面的进展。黄仁勋还提到,Omniverse Cloud将可以连接到苹果的混合现实(MR)头显Vision Pro。黄仁勋在现场展示了一款可以完全交互的汽车模型,能够通过流媒体技术传输到Vision Pro中。

关于机器人领域,黄仁勋在现场宣布,英伟达推出名为Project GROOT Foundation的AI模型,旨在创建性能更好的人形机器人。此外,还发布了一款专用于机器人的名为Thor的系统芯片。

黄仁勋表示:“机器人领域出现ChatGPT时刻的可能性近在咫尺,我们已经花了一段时间来构建端到端的机器人系统。”

以上内容为资讯信息快照,由td.fyun.cc爬虫进行采集并收录,本站未对信息做任何修改,信息内容不代表本站立场。

快照生成时间:2024-03-19 12:45:27

本站信息快照查询为非营利公共服务,如有侵权请联系我们进行删除。

信息原文地址:

...预计Meta可于年内完成该芯片在自有数据中心的部署,与英伟达GPU协同提供算力。该芯片是Meta去年宣布的内部芯片生产线的第二代产品,有助于减少Meta对占据市场主导地位的英
2024-02-03 21:39:00
英伟达推出史上最强AI芯片H200:推理性能提升90%,无缘中国市场
...狐科技作者 | 梁昌均在全球算力荒的情况下,AI芯片巨头英伟达加速算力竞赛。当地时间11月13日,英伟达宣布推出新一代人工智能芯片H200,称其是目前世界“最强”的AI芯片。
2023-11-14 14:05:00
从狂热到理性:大模型训练三堵墙,一场少数人的游戏 | 钛媒体深度
...达观数据自家购置一个自己的算力平台,达观数据选择了英伟达DGX高性能工作站方案,相当于英伟达自身做了很多集群优化,解决了存储和网络的大部分问题,直接买GPU卡自建集群和英伟达
2023-06-29 12:00:00
英伟达深夜炸场,世界最强AI芯片H200震撼发布,性能飙升90%
英伟达的节奏,越来越可怕了。就在刚刚,老黄又一次在深夜炸场——发布目前世界最强的AI芯片H200!较前任霸主H100,H200的性能直接提升了60%到90%
2023-11-14 13:41:00
英特尔推出新款AI芯片:推理性能比英伟达H100快50%
...750亿参数GPT-3模型的训练时间。英特尔表示,Gaudi 3能够比英伟达上一代H100处理器训练特定大型语言模型的速度快40%
2024-04-10 10:52:00
GPU受限,国内AI大模型能否交出自己的答卷?
...的算力资源,GPU是大模型的最佳算力发动机。截至目前,英伟达的GPU芯片正在为全球绝大多数的人工智能系统提供最基础的算力支持。那么,在GPU受限的情况下,国内AI行业发展境况
2023-04-14 18:02:00
英伟达H20重回市场,但中国芯片过去三个月已爆单
作者丨邱晓芬编辑丨苏建勋为了抢回中国的AI算力市场,英伟达创始人黄仁勋正进行一场意义重大的中国之行。此次黄仁勋行程满满,除了政府侧的拜访,他与小米创始人雷军的合照也已传遍网络。7
2025-07-16 19:39:00
Meta推出新版自研AI芯片:性能较上代提高三倍,降低对英伟达依赖
...排名和推荐系统而设计。分析指出,Meta的目标是降低对英伟达等芯片厂商的依赖。10日当天,Meta(Nasdaq:META)股价收于每股519
2024-04-11 12:44:00
AMD MI300绝杀英伟达H100?跑GPT-4性能超25%,AI芯片大决战一触即发
...芯片大决战,不少芯片初创公司跃跃欲试,希望一举打破英伟达的垄断地位。而AMD的MI300,在部署32K上下文窗口的GPT-4模型时
2023-11-06 15:12:00
更多关于财经的资讯:
为深入贯彻落实贵州省委、省政府提出的“以文塑旅、以旅彰文”核心要求,近日,工行遵义分行协同红花岗区人民政府、遵义市商务局
2026-01-19 17:09:00
精艺股份等成立智慧能源公司,含节能管理业务
近日,精艺之光(广东)智慧能源有限公司成立,经营范围包含:太阳能发电技术服务;工程和技术研究和试验发展;节能管理服务;太阳能热发电产品销售等。企查查股权穿透显示,该公司由精艺股份
2026-01-19 15:00:00
亚星锚链等在上海成立艺高珠宝公司
近日,亚星艺高珠宝(上海)有限公司成立,注册资本1000万元,经营范围包含:珠宝首饰批发;珠宝首饰零售;金银制品销售;珠宝首饰回收修理服务;有色金属合金销售等。企查查股权穿透显示
2026-01-19 15:00:00
中创智领在郑州新设产投合伙企业,出资额3亿
近日,中创智领(郑州)产业投资合伙企业(有限合伙)成立,出资额3亿元,经营范围包含:以自有资金从事投资活动;创业投资(限投资未上市企业)。企查查股权穿透显示,该企业由中创智领(6
2026-01-19 15:24:00
织金农商银行多措并举开展“两节”期间普惠金融宣传活动
为切实提升普惠金融服务的覆盖面、可得性与满意度,推动金融发展成果更好惠及“三农”主体、小微企业、新市民、老年群体等重点群体
2026-01-19 15:29:00
警银联动快速响应 织金农商银行成功拦截14万元电信诈骗资金
近日,织金农商银行依托警银联动反诈工作机制,凭借敏锐的风险洞察与高效应急处置,成功劝阻一起客户遭遇的电信诈骗案件,为客户挽回经济损失14万元
2026-01-19 15:30:00
“齐鲁建造” 助力建筑产业高质量发展
近日,“山东品牌年会暨主流财经媒体山东赋能品牌建设活动”在济南举办。活动期间,山东省建筑企业外出施工联络服务站主任戚立强受邀参与“公共品牌的建设与实践”专家论坛
2026-01-19 15:45:00
大皖新闻讯 1月19日,国际黄金价格创历史新高。伦敦现货黄金价格一度涨破每盎司4690美元。记者注意到,当日国内现货、期货及零售市场价格同步走强
2026-01-19 15:46:00
中国消费者报报道(记者聂国春)投保重疾险时称确诊即赔,确诊后却遭拒赔,理赔纠纷由此引发。北京市西城区人民法院近日发布的《涉重疾险纠纷审判白皮书(2021—2024)》(以下简称《白皮书》)显示
2026-01-19 15:47:00
鼎和财险毕节支公司违规牟利被罚14.9万元
1月19日,国家金融监督管理总局毕节监管分局行政处罚信息公开表显示,鼎和财产保险股份有限公司毕节支公司因利用开展保险业务为其他机构或者个人牟取不正当利益被罚款14.9万元。责任人
2026-01-19 16:22:00
江西彭泽农村商业银行棉船支行因内控管理不到位被罚款30万
1月16日,国家金融监督管理总局九江监管分局行政处罚信息公开表显示,江西彭泽农村商业银行股份有限公司棉船支行因内控管理不到位被罚款30万元。责任人喻某唯、王某分别被给予警告并处5
2026-01-19 16:22:00
中国人民人寿保险九江中心支公司因利用保险业务为他人牟取不正当利益等被罚款20万元
1月16日,国家金融监督管理总局九江监管分局行政处罚信息公开表显示,中国人民人寿保险股份有限公司九江中心支公司因利用保险业务为他人牟取不正当利益;给予客户合同外利益被处20万元罚
2026-01-19 16:23:00
江西广昌农村商业银行因员工行为管理不到位等被罚款70万元
1月16日,国家金融监督管理总局抚州监管分局行政处罚信息公开表显示,江西广昌农村商业银行股份有限公司因员工行为管理不到位、贷款管理不到位被罚款70万元。责任人刘某化被警告并罚款6
2026-01-19 16:23:00
华能水电等在四川布拖成立新能源公司,注册资本2亿元
近日,布拖华能新能源有限公司成立,法定代表人为朱启贤,注册资本为2亿元,经营范围包含:发电业务、输电业务、供(配)电业务
2026-01-19 16:24:00
精测电子、湖北江城实验室等成立集智创芯投资公司
近日,湖北集智创芯投资有限公司成立,法定代表人为杨道虹,经营范围包含:以自有资金从事投资活动;企业管理咨询;企业管理;创业空间服务;融资咨询服务等。企查查股权穿透显示,该公司由精
2026-01-19 16:24:00