• 我的订阅
  • 财经

壁仞科技申请一种模型训练的节点组网方法及装置专利,可提高整体训练性能

类别:财经 发布时间:2025-03-26 21:23:00 来源:瘦子财经

金融界2025年3月26日消息,国家知识产权局信息显示,北京壁仞科技开发有限公司申请一项名为“一种模型训练的节点组网方法及装置”的专利,公开号CN 119676089 A,申请日期为2024年12月。

专利摘要显示,本公开提供一种模型训练的节点组网方法及装置,其中所述方法包括:在对大模型进行混合并行训练之前,确定大模型在每次训练迭代中的数据并行通信开销的占比以及流水线并行通信开销的占比;若流水线并行通信开销占比大于数据并行通信开销占比,按照数据并行组的正序依次为每个数据并行组分配属于同一叶层交换机的连续节点;若正序分配结束后数据并行组未满足节点分配需求,则继续按照数据并行组的逆序依次为每个包含剩余节点的数据并行组分配属于同一叶层交换机的连续节点,直至分配节点完毕,可以减少跨叶层交换机的通信,且同一叶层交换机下的节点间通信具有更高的亲和性和更低的延迟,进而提高整体训练的性能。

天眼查资料显示,北京壁仞科技开发有限公司,成立于2020年,位于北京市,是一家以从事软件和信息技术服务业为主的企业。企业注册资本10000万人民币,实缴资本5000万人民币。通过天眼查大数据分析,北京壁仞科技开发有限公司专利信息197条,此外企业还拥有行政许可1个。

本文源自:金融界

作者:情报员/阅读下一篇/返回网易首页下载网易新闻客户端

以上内容为资讯信息快照,由td.fyun.cc爬虫进行采集并收录,本站未对信息做任何修改,信息内容不代表本站立场。

快照生成时间:2025-03-26 23:45:08

本站信息快照查询为非营利公共服务,如有侵权请联系我们进行删除。

信息原文地址:

推动大模型自我进化,北理工推出「流星雨计划」
...同,SRA-MCTS 完全依赖模型自身的推理能力进行数据生成和训练,避免了对人工标注数据或额外监督信号的依赖。 自我进化与持续提升:通过反复生成推理路径并进行自我训练,模型
2024-12-06 09:52:00
AI落地千行百业,存储痛点凸显,浪潮信息如何助力AI向实?
AI时代,存储不仅是数据的栖息之地,更是AI模型训练、落地过程中的坚实底座。在AI开启的存储行业新周期中,众多厂商已将带宽等性能指标卷至新的高度。然而,这种追求似乎将AI这一复杂
2024-11-08 09:46:00
用60%成本干80%的事,DeepSeek分享沉淀多年的高性能深度学习架构
...达千亿乃至万亿规模,需要成千上万台 GPU 才能有效完成训练。这些实际情况提升了人们对高性能计算(HPC)的需求。为了获得更多计算资源,人们不得不扩展更多计算节点。这就导致构
2024-09-07 09:44:00
浪潮信息获得发明专利授权:“一种图像识别方法、装置、设备、介质和剪枝方法”
...、装置、设备、介质和剪枝方法,根据原始图像识别模型训练过程中不同神经元节点组合的参数更新值以及不同神经元节点组合的数目,确定出不同神经元节点组合的参数平均值。对不同神经元节点
2025-04-26 04:37:00
“大装置+大模型”战略:助力商汤迅速获取生成式AI商业化果实
...“商汤生成式AI业务的增长,得益于各行各业对大模型的训练和推理的广泛需求。”在商汤科技董事长兼CEO官徐立看来,中国硬科技投资的新周期正式开启,而商汤能踏准这一关键的机遇点,
2024-04-01 15:16:00
商汤大装置:打造人工智能算力“样板间”,从AI 1.0跨越到2.0时代
...联,并行效率达90%,可在园区里实现万亿参数模规的模型训练。在训练稳定性上,具备了超30天稳定训练不间断的能力。林海 商汤科技大装置事业群智算中心总经理 商汤科技董秘办董事
2024-04-01 09:24:00
商汤生成式AI业务飙涨256%,成为中国大模型、智算服务市场占有率领头羊
...量。在支持商汤自身大模型研发的同时,也支持外部客户训练大模型和应用部署。强大算力可支撑超过20多个千亿超大模型同时训练,并支持万亿参数大模型的全生命周期生成。之后随着Chat
2024-09-13 13:50:00
从狂热到理性:大模型训练三堵墙,一场少数人的游戏 | 钛媒体深度
...么用。”到了4月,有些客户已经尝试过或者见过大模型训练,逐渐开始想明白,大概知道想要什么样的配置。要一堆GPU卡,实际上是一个认知误区,大模型训练的实现依靠的是一个算力集群,
2023-06-29 12:00:00
突破瓶颈!华为两大AI存储新品推进AI赋能千行百业
...关注的是,面对AI大模型中更复杂的数据归集、预处理、训练、推理等过程,存力也迫切需要优化升级,避免数据存储成为系统瓶颈和算力资源闲置、浪费等局面。“大模型时代,数据决定AI智
2023-07-27 11:42:00
更多关于财经的资讯:
捂紧“钱袋子” 备足“新票子”-毕节农商银行春节便民服务暖街巷
年味渐浓,集镇喧腾。一边是电信诈骗岁末抬头,一边是商户找零“一票难求”——毕节农商银行杨家湾支行瞄准节前两道民生考题,将柜台搬进商铺
2026-02-14 22:21:00
工行遵义凤冈支行圆满举办“马蹄踏春·花纳新福”新春答谢会活动
岁序更迭,华章日新。当冬日的寒意渐褪,春日的蹄声便踏着欢快的节奏而来。2026年2月4日,工行遵义凤冈支行怀揣最真挚的感激
2026-02-14 22:21:00
“太感谢你们了,孩子的奶粉和新年衣服终于有着落了!”客户紧紧握住银行工作人员的手,看到银行卡成功由二类卡升级为一类卡,家住榕江县山村的小吴激动不已
2026-02-14 22:21:00
多彩贵州网讯(记者 金星)为深入贯彻落实中央金融工作会议精神,紧密围绕做好科技金融、绿色金融、普惠金融、养老金融、数字金融五篇大文章的战略部署
2026-02-14 22:21:00
威宁农信联社龙场信用社:与返乡人叙乡情、问需求、送服务
2月11日,威宁农信联社龙场信用社走进龙场镇宣峰村村公所,召开了一场别开生面的“外出就业创业返乡人员座谈会”。来自辖区内的30余名返乡务工创业代表
2026-02-14 22:21:00
近日,在人民银行黔南州分行的统一组织下,贵州银行都匀剑江支行积极参与由市人力资源和社会保障局主办的“春风送岗”专项活动
2026-02-14 22:21:00
一张张零散纸币,一枚枚叮当作响的硬币,看似微不足道,却承载着商户的日常经营与老百姓的生活便利。近日,工行兴义兴仁支行凭借一项基础却暖心的服务——零钱兑换
2026-02-14 22:21:00
银企联动,反假同行——民生银行遵义红花岗支行走进企业开展反假货币宣传
多彩贵州网讯(记者 金星)岁末年初,年味渐浓。在贵州某企业的年终游园会上,一场别开生面的“金融年货”宣传活动悄然展开。民生银行遵义红花岗支行以“反假货币
2026-02-14 22:21:00
多彩贵州网讯(记者 金星)在国家大力推进新型工业化与制造业升级的战略背景下,如何将丰富的矿产资源优势转化为经济优势和发展优势
2026-02-14 22:21:00
毕节农商银行为返乡人员提供“接站暖心服务”
岁末返乡季,温情暖人心。为积极践行社会责任,以实际行动温暖外出就业创业返乡人员,2月12日,毕节农商银行联合毕节市人力资源和社会保障局在毕节高铁站开展返乡外出就业创业人员接站活动
2026-02-14 22:22:00
工行毕节大方支行:金融时雨润春耕,沃野产业绘新篇
贵州省毕节市大方县,山川秀丽,全县耕地面积达百万亩,森林覆盖率超过46%,独特的立体气候和肥沃的土壤孕育了丰富多样的农产品资源
2026-02-14 22:22:00
工行毕节赫章支行:金融活水添年味,政银联动促消费
为深入践行金融工作的政治性、人民性,积极响应地方政府促消费、惠民生工作部署,工行毕节赫章支行与赫章县商务局紧密协作,作为县域指定金融服务机构
2026-02-14 22:22:00
近日,工行兴义坪东支行凭借细致周到的服务,成功为一名老年客户解决了银行卡取款难题,并贴心指导其掌握便捷的移动金融服务,赢得了客户的高度赞誉
2026-02-14 22:22:00
工行遵义仁怀支行:去匠心筑家的地方
在仁怀市区,某家居定制门店内板材与五金件整齐陈列,空气中有新切割木材的淡香。这里不仅是居所空间的延伸,更是城市生活品质的缩影
2026-02-14 22:22:00
2026年2月3日清晨,一位老人扶着门框,缓缓挪进工行毕节清毕路支行。他没有取号,也未咨询业务,只是静静地坐在客户经理丁越办公室门外
2026-02-14 22:22:00