• 我的订阅
  • 头条热搜
AMD将构建全球最大AI训练集群,集成120万片GPU
...表示,AMD将助力构建全球最大的单体人工智能(AI)训练集群,将集成高达120万片的GPU。120万片GPU 是一个非常惊人的数字,要知道目前全球最强的超级计算机Frontier 所配备的 GPU 数量才只有37888片,这也意味着AMD所支持的AI训练集...……更多
amd助力构建全球最大单体人工智能训练集群
...表示,AMD将助力构建全球最大的单体人工智能(AI)训练集群,将集成高达120万片的GPU。120万片GPU是一个非常惊人的数字,要知道目前全球最强的超级计算机Frontier所配备的GPU数量才只有37888片,这也意味着AMD所支持的AI训练集群...……更多
AI集群,对抗英伟达的新“杀手锏”?
...思考如何将数量庞大的GPU构建成一个更大规模的超大规模集群。近日,AMD执行副总裁兼数据中心解决方案集团总经理Forrest Norrod在接受采访时表示,AMD将构建全球最大的单体AI训练集群,将集成高达120万片的GPU。作为对比,目前...……更多
马斯克宣布训练“世界上最强大的人工智能” !万卡集群背后的算力竞赛迅猛升级
...伟达及支持公司于当地时间凌晨4时20分开始在孟菲斯超级集群上进行训练。据他介绍,该集群在单个RDMA fabric上使用10万张液冷H100,号称“世界上最强大的AI训练集群”。马斯克在评论区透露,其目标是“今年12月前训练出世界上...……更多
Nvidia斥资7亿美金收购GPU集群优化初创公司Run:ai
Nvidia今天透露,已经收购了Run:ai,一家开发优化显卡集群性能软件的初创公司。此次收购交易的条款并未披露。TechCrunch援引两位知情人士的话报道称,此次交易对Run:ai的估值为7亿美金,这几乎是这家总部位于特拉维夫的初创公...……更多
优刻得首个「国产千卡智算集群」落地,支持智源千亿大模型训练
...不移的发展自主可控的国产技术方案,持续壮大国产智算集群规模,才能一路突破围追堵截,进一步促进国产大模型产业生态繁荣。作为中立、安全的云计算服务厂商,优刻得持续发力人工智能智算领域,与国内主流AI芯片厂商...……更多
十万块英伟达H100打造,马斯克宣布“全球最大 AI 训练集群”投用
...IT之家 7 月 23 日消息,马斯克现宣布,孟菲斯超级计算机集群(Memphis Supercluster)于当地时间凌晨 4:20 开始进行训练,感谢 xAI 团队、X 团队、英伟达及其支持公司所做的贡献。(IT之家注:孟菲斯是田纳西州人口第二大城市)。...……更多
马斯克:xAI启动“最强大AI训练集群”、年底推出全球最强AI
...在社交平台上表示,xAI已经启动了“世界上最强大的 AI 集群”,以在今年12 月之前创建“世界上最强大的AI”。马斯克自豪地透露,得益于xAI团队、X团队、Nvidia及众多合作伙伴的紧密协作,位于孟菲斯的超级计算工厂“Supercluste...……更多
全球最大AI超算内部首次曝光!马斯克19天神速组装10万块H100,未来规模还将扩大一倍
...练系统。最近,马斯克又宣布了一条振奋人心的消息——集群即将扩展到20万张H100/H200显卡!同时,ServeTheHome也发布了一条15分钟的视频,公布了这台超算的详情!来自ServeTheHome的Patrick Kennedy带着摄影机探访了这台超级计算机这...……更多
Enfabrica推出全球最快GPU网络接口控制器芯片,获1.15亿美元融资
...理能力已经显得微不足道,计算任务往往需要由大型显卡集群协同完成。然而,当前 GPU 内存容量和性能正在迅速增长,但输入/输出(I/O)性能的增长却相对滞后,这成了 AI 算力提升的重要瓶颈,导致了大量计算资源未被充分...……更多
戴尔以技术创新推动AI基础架构升级
...的普及。 另一方面,计算规模越来越大,越来越多地通过集群来承载,万卡、十万卡GPU规模的数据中心也不鲜见。与计算规模扩大同时增加的还有网络通讯需求,让高带宽、低延迟网络交换设施成为AI系统的必要组成部分。与此同时,...……更多
算力浪费超50%!百度AI计算部负责人拆解大模型时代的算力成本
...媒体解读了大模型时代的算力成本。为了有效降低AI万卡集群的算力开支,他提出搭载RDMA网络、自动并行策略、保证训练稳定性、动态分配算力、多芯异构混训,共五个方面的解决方案。过去互联网时代,服务器每台数万元,各...……更多
LLM训练通信量减少10000倍!全新分布式优化器,整合世间算力训练强大AI
...,而整个网络世界也就成为了一个巨大的异构的AI服务器集群。——任何有相关算力的设备都可以参与到训练过程之中。实验证明,本文的方法基本不会导致模型性能下降,同时DisTrO-AdamW在收敛速度方面,也与标准的AdamW+All-Reduce...……更多
卓翼飞思智能算法云仿真平台助推全国集群挑战赛,引爆行业热潮!
...24日-27日,由中国指挥与控制学会主办的2023年第七届全国集群智能与协同控制大会暨首届全国集群智能技术挑战赛在六朝古都南京召开。来自全国优秀高校、科研院所的 60多支参赛队伍共计400余名队员,在为期2个多月的比赛阶...……更多
三星打造全球首个大型计算系统ai训练性能提高2.5倍
...过PIM改造的GPU,而现在该公司将96张经过PIM改造的GPU放在集群中。与普通显存相比,这些经过改进的MI100芯片不仅性能提高了2.5倍,而且功耗降低了2.67倍,大大提高了GPU在运行AI算法时的效率。三星开发PIM已有一段时间了。...……更多
跨越算力鸿沟丨星凡科技2024AI算力集群产品发布会圆满成功
2024年3月29日,星凡科技2024“跨越算力鸿沟”AI算力集群产品发布会在成都顺利召开。本次产品发布会,星凡科技重磅发布自研算力集群产品“超新星分布式微算力中心”,用更低成本、更高算力密度的集群产品解决当下算力中...……更多
价值290亿!马斯克狂揽10万块H100:自建世界最强AI超算集群
世界最强AI集群,马斯克建成了!这一爆炸消息,由老马在推特上亲自官宣。当地时间凌晨4:20,由xAI、X和英伟达等合力打造的孟菲斯超级集群已开始投入训练。它由10万块H100组成,是目前世界上最强训练集群!这一规模已远超...……更多
特斯拉超级计算集群命名Cortex:10万颗英伟达芯片训练FSD和机器人
...息,马斯克在周末参观了最近建成的得克萨斯州超级计算集群后,透露该工厂的名称为“Cortex”。马斯克介绍,“Cortex”拥有约10万颗英伟达H100和H200芯片,用于训练全自动驾驶(FSD)和人形机器人擎天柱(Optimus)的神经网络。...……更多
要以计算集群的视角,来重新审视芯片!
...可以将多块国产芯片通过技术整合,形成一个强大的计算集群。例如,两三块华为海思、龙芯或飞腾的芯片,完全有可能达到甚至超越一块英特尔芯片的计算能力。而更进一步,这种方式还为我们提供了一个重构数据中心的机会...……更多
1890美元,就能从头训练一个还不错的12亿参数扩散模型
...练分别消耗了总计算成本的 56% 和 44%。模型在 8×H100 GPU 集群上的总时钟训练时间为 2.6 天,相当于在 8×A100 GPU 集群上为 6.6 天。了解更多结果,请参考原论文。 ……更多
首个国产单池万卡液冷算力集群投入运营,满足万亿级大模型训练需求
...户。这是国内首个投入正式运营的国产单池万卡液冷算力集群,也是业内领先的全国产化云智一体公共智算中心。会上,人工智能研究院、稀宇科技、百川智能、思必驰科技、亿熵智能科技、澜码科技、赛陇生物科技、天壤智能...……更多
腾讯钟学丹:人工智能成为汽车行业新质生产力 推动数智化升级
...还将在自动驾驶等场景中充分应用。新一代HCC高性能计算集群,搭载最新次代GPU,支持10万卡GPU超大计算规模,是国内性能最强的大模型计算集群之一,最快四天就可以训练万亿参数的大模型。腾讯自研的星脉网络,则为新一代...……更多
Yandex推出开源大语言模型训练工具,称可节省高达20%的图形处理器资源
...就越多。需要说明的是,大型语言模型训练依赖于组织成集群的众多图形处理器,这些集群是互连的图形处理器阵列,可以执行训练具有数十亿参数的模型所需的大量计算。在集群内的处理器之间分配计算需要持续的通信,这往...……更多
新一代aigc技术的发展
...故障域广泛等问题,这种技术仅适用于小规模的AI计算机集群部署。新一代AIGC网络:DDC技术由于传统以太网存在性能瓶颈,传统方法仍然面临拥塞和丢包等性能损失,并且可扩展性不足。为应对这些限制,DDC解决方案应运而生。...……更多
中国智算建设潮背后,谁在推动十万卡集群
在打造十万卡集群上,几家国内头部企业已有动作。在11月12日举办的百度世界2024大会上,百度集团执行副总裁、百度智能云事业群总裁沈抖透露,为了支撑大模型进一步的高速发展,百度在打磨十万卡集群能力方面,已在两大...……更多
国产GPU万卡集群终于来了!摩尔线程CEO张建中:做难而正确的事
...100天,折算成H100则需要1000张;Meta今年推出2个24576张H100集群,用于训练Llama 3等新模型;本周马斯克自曝新版Grok 3训练用了10万张H100 GPU。在国内,万卡集群建设高歌猛进。去年7月,华为昇腾AI集群规模扩展至16000卡;10月,科大...……更多
通信效率超98%!壁仞科技实现中国首个三种异构芯片混训技术
...异构协同、开源开放的大模型整体解决方案可以实现千卡集群、千亿参数的自动断点续训小于10分钟,15天连续训练不中断,4天连续训练无故障。 壁仞科技还透露,其正联合客户、合作伙伴、科研机构共同推动异构GPU协同训练...……更多
当大模型Scaling Law继续,万卡集群算力释放在百舸找到一条通途
...算力需求对 GPU 等硬件提出了更高要求,大规模 GPU 算力集群成为必然选择。这也是为什么近年来国内外科技厂商纷纷布局 AI 算力基础设施,死磕万卡甚至 10 万卡集群。此外,大规模算力集群也越来越凸显训推一体的重要性,寻...……更多
从0到1:国产化千卡集群的一小步,AI算力主动权的一大步
...透过OpenAI的演进轨迹,就会发现AI算力的重心已从单机向集群蜕变:伴随大模型的参数规模从百亿、千亿到万亿,所需的数据量也从几百B跃升到P级,千卡、万卡集群正日益成为大模型训练的标配。显而易见,要想走出多重因素...……更多
摩尔线程GPU千卡集群完成师者AI 70亿参数教育大模型训练测试
...模型训练测试。师者AI基于摩尔线程夸娥(KUAE)千卡智算集群,完成了其70亿参数大模型的高强度训练测试。整个训练过程用时一周,训练效率达到预期,充分展示了夸娥千卡智算集群作为国产全功能GPU千卡千亿训练平台的能力...……更多
更多关于科技的资讯:
雷军点赞《哪吒2》:口碑相当好!
快科技2月9日消息,近期《哪吒2》大火,王腾昨天请REDMI团队的同学包场观影,并表示哪吒的气质和精神和REDMI很像
2025-02-09 08:16:00
开曼群岛海域8.0级地震 阿里腾讯小米等科技大厂在此注册
快科技2月9日消息,据多方媒体报道证实,北京时间2月9日7时23分,加勒比海开曼群岛附近海域发生了一场震源深度为33公里的8
2025-02-09 08:46:00
小米手机春节激活量全国第一:REDMI K80拿下单品第一!
快科技2月9日消息,据供应链数据,2025年W5(1.27-2.2)春节期间,小米新机激活量达130万台,市场份额19
2025-02-09 08:46:00
用DeepSeek“赚钱”网课泛滥 专家:普通用户不用花钱学
快科技2月9日消息,来自深度求索的国产AI大模型DeepSeek最近在全球走红,与此同时,各种DeepSeek“培训课程”
2025-02-09 09:16:00
全新世界纪录!技嘉X870实现双通道DDR5-10200:运行相当稳定
快科技2月9日消息,技嘉内部超频专家hicookie分享了一张截图,展示了X870 AORUS Tachyon ICE主板搭配全何DDR5内存套装
2025-02-09 09:16:00
到手价只需1999元!中国特供版RX 7650 GRE有了全新内涵
快科技2月9日消息,近日,AMD新款中国特供版显卡RX 7650 GRE在京东商城开启预售,价格2049元起,叠加返京东E卡活动
2025-02-09 09:46:00
厦门网讯(厦门日报记者 李晓平)人工智能需要强大的电力资源保障。近日,厦企科华数据宣布,携手壁仞科技、燧原科技、沐曦集成
2025-02-09 09:58:00
厦门网讯(厦门日报记者 林露虹)工信部等13个部门近日联合公布“2024年网络安全技术应用典型案例项目”名单,我省有2个项目入选
2025-02-09 09:58:00
□南京日报/紫金山新闻记者刘全民 通讯员黄秋蓉2月7日上午,室外寒气逼人,位于高淳区古柏街道的南京铭客传动系统有限公司生产车间内却是一派火热景象
2025-02-09 10:09:00
饺子导演跻身国内导演榜前五!有望赶超陈凯歌张艺谋
快科技2月9日消息,据最新媒体报道,饺子导演已跻身国内导演票房榜前列,并有望超越陈凯歌、张艺谋等资深导演。据最新数据显示
2025-02-09 10:16:00
国行Apple智能要来了!苹果宣布3月25日举办开发者活动
快科技2月9日消息,苹果公司近日向开发者发送邮件,宣布将于3月25日在上海举行“利用Apple智能的力量”开发者活动。此次活动或许意味着
2025-02-09 10:46:00
花198元下载成山寨DeepSeek 苹果:或向App Store购买了推广位
快科技2月9日消息,日前,快科技报道了苹果App Store应用商店中DeepSeek“李鬼”横行,许多用户下载后还花了198元充值
2025-02-09 10:46:00
为训练AI不择手段!Meta被曝下载数十TB盗版电子书
快科技2月9日消息,据媒体报道,一名图书作者对Meta提起诉讼,指控该公司未经授权下载了大量盗版电子书,用于训练其AI模型
2025-02-09 11:16:00
福特CEO:电车想赢需要先学中国技术
快科技2月9日消息,福特汽车CEO吉姆·法利在《纽约时报》的采访中明确表示,为了在全球电动汽车市场与中国竞争,福特必须学习和利用中国的先进技术
2025-02-09 11:46:00
中国留学生独自将“陕A”开到伦敦 途中一国境内80%没信号
快科技2月9日消息,据媒体报道,近日,一位名为江仁基的00后小伙成为了亲朋好友以及众多网友和媒体关注的焦点。事件的起因是一位在英国留学的中国学生在社交媒体上发布了一段视频
2025-02-09 11:46:00