• 我的订阅
  • 头条热搜
AI推理速度提升超10倍,Groq LPU能否取代英伟达GPU?
...B左右的内存,即使完全忽略内存消耗,也需要305张Groq LPU加速卡才够用。如果考虑到内存消耗,可能需要572张Groq LPU加速卡。官方数据显示,Groq LPU的平均功耗为185W,即使不计算外围设备的功耗,572张Groq LPU加速卡的总功耗也高...……更多
amd旗舰aigpu加速器mi300x对比英伟达h100
...00高出60%。性能:AMD公司在演讲过程中,对比英伟达的H100加速卡,分享了MI300X的性能参数情况,IT之家附上数值如下:内存容量是H100的2.4倍内存带宽是H100的1.6倍FP8TFLOPS精度是H100的1.3倍FP16TFLOPS精度是H100的1.3倍在1v1比较中,训练L……更多
推理性能提升30倍!英伟达发布史上最强AI芯片,黄仁勋:将成最成功产品
...进行大幅提升。英伟达于2022年发布了基于Hopper架构的H100加速卡,而现在推出基于Blackwell的加速卡在性能上也得到了全面提升,更擅长处理AI相关任务。从外观来看,Blackwell GPU的体积明显大于H100,采用台积电的4纳米(4NP)工艺...……更多
英伟达尖端图像处理半导体h200开始供货
...运算处理装置)组合的新产品用于最新的LLM上。“最强AI加速卡”GB200包含了两个B200BlackwellGPU和一个基于Arm的GraceCPU ,推理大语言模型性能比H100提升30倍,成本和能耗降至25分之一。GB200采用新一代AI图形处理器架构Blackwell,黄仁...……更多
英特尔披露5nm“中国特供版”AI 芯片,性能或暴降92%,最快6月推出|硅基世界
...售的两款“特供版”AI 芯片产品。具体包括两种硬件形态加速卡:一款型号为HL-328的OAM兼容夹层卡(Mezzanine Card),预计将于今年6月24日推出;另一款是型号为HL-388的PCle加速卡,预计将于今年9月24日推出。而基于内核数量、工作...……更多
微软紧随英伟达发布芯片,老黄还不慌吗?
...款最热门产品的产能和需求,但据外媒报道,今年内H100加速卡的产能至少同比增长了3倍,且仍有许多产能瓶颈无法解决。比如台积电5nm生产线产能,英伟达的GPU必须使用台积电的CoWoS封装技术,市面上完全找不到别的替代品。...……更多
AI芯片下半场:英伟达不再一家独大
...分向客户提供。另一个芯片大厂AMD也在不久前推出了最新加速卡Instinct MI300X。在发布会现场,PPT上专门打出一行字——大语言模型专用,这被业界视为直接向英伟达宣战。据悉,MI300X的高带宽内存(HBM)密度最高可达英伟达H100...……更多
英伟达推出史上最强AI芯片H200:推理性能提升90%,无缘中国市场
...狐科技作者 | 梁昌均在全球算力荒的情况下,AI芯片巨头英伟达加速算力竞赛。当地时间11月13日,英伟达宣布推出新一代人工智能芯片H200,称其是目前世界“最强”的AI芯片。H200此次升级主要体现在带宽更高、容量更大的内存...……更多
英特尔第五代至强可扩展处理器发布:AI推理性能提升42%!
...模型的性能需求,同时在成本上也是远低于那些高昂的AI加速卡。 英特尔表示,在使用2S 五代至强平台上运行GPT-J 6B模型(60亿参数),它可以实现在大约25毫秒下完成一个Token的处理。不过,对于运行更大的Llama 2 13B模型时,其...……更多
sk海力士hbm3e开始量产
3月19日消息,英伟达今日发布了地表最强的AI加速卡--BlackwellGB200,采用台积电4NP工艺制程,配备192HBM3E内存,共有2080亿个晶体管,推理大语言模型性能比H100提升30倍,成本和能耗降低96%。SK海力士今日发布新闻稿宣布其最新的超...……更多
大模型推理乘上RISC-V快车?国内AI芯片创企推大模型系列一体机
...希姆STCP920系列采用12nm工艺,是基于RISC-V的人工智能计算加速卡,具备较高的云端AI计算能效比和可编程性,混合支持FP16/INT8数据类型。希姆计算将其在传统AI场景里的方案针对大模型进行了专门的优化,姚金鑫坦言,这一一体机...……更多
AMD公布全新AI加速卡路线图:CDNA 4架构明年见
如今AI大红大紫,英伟达也凭借着AI加速卡赚的是盆满钵满,这对于AMD来说实在是心痒痒,因此AMD也马不停蹄地公布了自家最新的AI加速卡路线图,未来的计算卡将会比英伟达B200更强,希望能够从英伟达口中夺得更多的市场份额...……更多
AI服务器缺货真相调查:两天涨价30万,连“味精大王”都入场了
...的芯片可有不同的组合方式,包括CPU+GPU、CPU+TPU、CPU+其他加速卡等。相比于通用服务器,AI服务器更适应AI训练和推理的大算力、高并发、大数据流转等需求,已经成为大模型时代的“香饽饽”。以热门AI服务器型号浪潮NF5688M6服...……更多
ChatGPT掀AI热潮 这些芯片厂商将“狂飙”
...芯片的需求将暴增,给低迷的半导体行业带来一股暖流,英伟达、三星电子、SK海力士等都将受益。但是英伟达服务器用AI芯片方案存在发热和功耗过大的问题,谷歌、亚马逊AWS、三星电子、SK海力士、百度等科技巨头厂商也在开...……更多
英特尔至强6主板曝光:双路带来576小核与32条内存插槽
...协,比如说没有完整的PCIe16插槽,这或许让Gaudi3这样的AI加速卡难以发挥最大的作用。英特尔在之前的发布会上表示,至强6处理器的E核的每瓦性能是上代的2.4倍,机架密度也是上代的2.7倍。英特尔表示72个机架服务器就能完成过...……更多
响应速度碾压英伟达,AI芯片领域又出“王炸” 创始人豪言将把计算成本“降至零”
...初创企业在软件层面“争奇斗艳”。而在硬件层面,似乎英伟达已经“一骑绝尘”,该公司生产的GPU芯片“一片难求”,全球AI厂商都争相求购。▲Groq芯片不过就在当地时间20日,初创芯片企业Groq开放了免费试用,其芯片响应速...……更多
英伟达推新一代芯片H200:内存、带宽大升级
11月14日消息,据外媒体报道称,英伟达今天发布了新一代芯片H200,其整体性能相比上一代有着大幅提升。官方公布的细节显示,新的H200芯片是当前用于训练最先进大语言模型H100芯片的升级产品(基于Hopper架构),集成了141GB...……更多
英伟达“骚操作”令人无语:为了抬价竟让显卡停产1个月?
...式AI恰恰需要基于海量的数据进行推理训练,高算力的GPU加速卡自然也成了市场的抢手货。根据FierceElectronics报道,ChatGPT目前需要用25000块英伟达A100GPU芯片来维持训练。大量公司同样需要基于英伟达的CUDA平台进行对AI的训练和推...……更多
...版和Edge10Max三款芯片,出货形态包括芯片、板卡、盒子、加速卡、推理服务器等,可广泛应用于AIoT边缘视频、移动机器人等场景。此外,依托Dee Edge10创新的D2D chiplet架构打造的X5000推理卡,已适配并可承载SAM CV大模型、Llama2等百...……更多
最强大模型训练芯片H200发布!
英伟达老黄,带着新一代GPU芯片H200再次炸场。官网毫不客气就直说了,“世界最强GPU,专为AI和超算打造”。听说所有AI公司都抱怨内存不够?这回直接141GB大内存,与H100的80GB相比直接提升76%。作为首款搭载HBM3e内存的GPU,内存...……更多
Meta推出新版自研AI芯片:性能较上代提高三倍,降低对英伟达依赖
...排名和推荐系统而设计。分析指出,Meta的目标是降低对英伟达等芯片厂商的依赖。10日当天,Meta(Nasdaq:META)股价收于每股519.83美元,涨0.57%,总市值1.33万亿美元。Wind数据显示,自今年年初以来,Meta股价已涨超47%。从名字来...……更多
AI算力大战开启:英特尔AI芯片性能超越H100,谷歌云推出最强ARM芯片|钛媒体AGI
...及 2 倍的网络带宽提升。同时,在AI模型算力中,相比于英伟达H100 GPU,Gaudi3 AI芯片的模型训练速度、推理速度分别提升40%和50%,平均性能提高 50%,能效平均提高40%,而成本仅为H100的一小部分。英特尔预计,Gaudi 3将于2024年第二...……更多
芯片战场丨瞄准大模型 摩尔线程首个千卡智算中心落地
...集群。同时,摩尔线程CEO张建中在当天发布了大模型智算加速卡MTT S4000,以及专为千亿参数大模型训练和推理提供支持的摩尔线程KUAE平台。近年在AI热潮之下,国内的智算中心不断兴建。根据此前国家信息中心联合浪潮信息发布...……更多
AMD最强AI芯片发布:性能是英伟达H100的1.3倍!
...面向AI及HPC领域的GPU产品InstinctMI300A/MI300X加速器,直接与英伟达(NVIDIA)H100加速器竞争。同时AMD还发布了代号为HawkPoint的最新一代Ryzen8000系列APU,可面向AIPC产品。MI300A:HPC性能达到NVIDIAH100的4倍虽然在今……更多
英特尔Lunar Lake「统一内存」,一切都是为了AI
... M 系列芯片就采用了统一内存架构,此外,英伟达的高端加速卡如 H100、B200 都是直接将内存(包括 HBM)焊在 GPU 和 CPU 旁边,封装成一个芯片。这样做的好处也非常明显,首先是可以显著提升数据传输速度和系统响应时间。内存...……更多
四月AI芯片三连发,英伟达:无惧竞争!
...AMD的InstinctMI300。美银分析师VivekArya发表研究报告指出,英伟达2024年AI加速器的占有率将超过75%,定制化芯片(如GoogleTPU、亚马逊Trainium/Inferentia加速器、微软Maia)的占有率为10~15%,而剩余的10~15%才是AMD、英特尔及……更多
英伟达斥巨资拿下hbm3内存供应合同
...消息,韩国ChosunBiz报道称,除了大量预定台积电产能外,英伟达还斥巨资拿下了HBM3内存的供应合同。消息人士称,该公司从美光和SK海力士那里预购了700亿至1万亿韩元(IT之家备注:当前约3.84亿至54.9亿元人民币)的HBM3内存。虽...……更多
英伟达blackwell计算引擎制造商推出的ai模型
如果还有人想在AI处理领域跟英伟达正面抗衡,那最好再多做几手准备。除了最强大的技术储备之外,大家可能还需要雄厚的资金支持和上天的意外眷顾。换句话说,如今压制英伟达的唯一可能性恐怕只有天降神迹。日前在圣何...……更多
amd发布新一代面向ai/hpc加速器
...U+GPU的融合加速器。对于MI300X这款APU,AMD对比英伟达的H100加速卡,分享了MI300X的一些性能参数情况,具体数值如下:内存容量是H100的2.4倍;内存带宽是H100的1.6倍;FP8TFLOPS精度是H100的1.3倍;FP16TFLOPS精度是H100的1.3倍;在1v……更多
英特尔推出新款AI芯片:推理性能比英伟达H100快50%
...750亿参数GPT-3模型的训练时间。英特尔表示,Gaudi 3能够比英伟达上一代H100处理器训练特定大型语言模型的速度快40%,在推理端比英伟达H100快50%。基辛格在现场表示,Gaudi 3的性能将与英伟达H200相当,在某些领域的性能甚至会更...……更多
更多关于科技的资讯:
人民网“福建金融舆情管理共享平台”上线 打造金融舆情服务新模式
本文转自:人民网金融是国民经济的血脉,是国家核心竞争力的重要组成部分。日前,中央金融工作会议要求,各地区各部门要扎实做好加强金融监管
2024-06-26 20:22:00
更轻更节能!全球首列商用碳纤维地铁列车在青岛发布
本文转自:人民日报客户端侯琳良6月26日,中车青岛四方机车车辆股份有限公司联合青岛地铁集团为青岛地铁1号线研制的碳纤维地铁列车“CETROVO1
2024-06-26 22:42:00
蔚来车主踩断加速踏板 官方回应:车辆曾发生严重碰撞事故
快科技6月26日消息,说一个很多人可能想不到的冷知识,汽车的加速踏板并非金属,是有可能被踩断的,特殊情况下也会自己断裂
2024-06-26 16:07:00
美团忽视的闲时生意:被抖音做火了
快科技6月26日消息,在本地生活服务领域,抖音通过创新的"错峰特惠"活动,巧妙捡起了美团忽视的闲时生意。想象一下,一家店有时候人头攒动
2024-06-26 16:07:00
@高考生,新能源汽车大佬们喊你来选专业啦
‍‍‍‍近日,工信部发布的《制造业人才发展规划指南》显示,到2025年,我国新能源汽车产业的人才缺口可达103万人。其中
2024-06-26 16:11:00
千余家企业参展 第27届青岛国际机床展览会启幕
宋祖锋青岛报道6月26日,第27届青岛国际机床展览会和第7届中日韩智能制造大会在青岛市即墨区启幕。本次展览会为期五天,将深度聚焦中日韩智能制造前沿
2024-06-26 16:12:00
青岛发布全球首列商用碳纤维地铁:重量更轻 年内载客
快科技6月26日消息,全球首列商业化运营的碳纤维地铁列车“CETROVO 1.0 碳星快轨”今日在青岛正式发布。该列车由中车四方股份公司与青岛地铁集团联合研制
2024-06-26 16:22:00
7分10秒!疑小米SU7纽北圈速曝光:比奔驰AMG GT R还快
快科技6月26日消息,小米SU7已经前往世界最为知名的纽北赛道测试,近日,有网友曝光了该车的成绩,其称自己就在现场观看
2024-06-26 16:22:00
腾讯QQ的“祖师爷”!聊天软件鼻祖ICQ今日正式停止服务
快科技6月26日消息,聊天软件鼻祖ICQ在5月份发表公告称,将于6月26日关闭,建议用户改用VK Messenger。ICQ官网今天显示“Service stopped working”
2024-06-26 16:22:00
探店经济激发消费新活力 短视频、直播让餐饮酒旅更巴适四川新闻网成都6月26日讯在数字化浪潮下,抖音等短视频和直播平台已成为人们获取信息
2024-06-26 16:22:00
设计大咖齐聚2024科勒 · 设计上海设计论坛
2024年6月19日(中国,上海)——亚洲权威设计盛会「设计上海」2024于上海世博展览馆盛大开幕,汇聚世界设计力量,见证全球设计新高度
2024-06-26 16:23:00
同一角色两套穿搭!美女COS老头环人物反差感十足
借着《艾尔登法环:黄金树幽影》发售后的热度,围绕游戏中的女角色,例如女武神玛莲妮亚、永恒女王玛莉卡、梅琳娜的COS作品在近期也涌现了出来
2024-06-26 16:37:00
光存储第一股!紫晶存储因欺诈发行退市被追偿10.86亿元
快科技6月26日消息,据媒体报道,紫晶存储发布公告称,收到中信建投、致同会计师事务所、容诚会计师事务所和广东恒益律师事务所等的诉讼材料
2024-06-26 16:52:00
万元折叠屏机皇降临!三星Galaxy全球发布会前瞻
三星公司官宣将于北京时间7月10日21点在法国巴黎举办Galaxy全球新品发布会。本次活动全程网络直播,将会发布Galaxy Z Fold6
2024-06-26 16:52:00
两栋大厦几乎搬空 完美世界回应大规模裁员
快科技6月26日消息,针对近期网络传言关于完美世界启动大规模裁员的消息,公司今日作出回应,确认此举为必要的人员结构优化
2024-06-26 16:52:00