• 我的订阅
  • 科技

全球首个!中国电信完成千卡、千亿参数模型500公里联合训练试商用

类别:科技 发布时间:2025-01-23 13:32:00 来源:浅语科技

快科技1月23日消息,据中国电信,在集团公司统一组织下,中国电信研究院、天翼云、北京电信成功了 完成业内首个1024卡、千亿参数商用大模型的分布式联合训练真实用户试商用。

通过天津市武清区到北京市大兴区瀛海镇之间的真实光路环回,实现了500公里长距互联分布式训练,而且训练性能达到单数据中心的97%以上。

全球首个!中国电信完成千卡、千亿参数模型500公里联合训练试商用

本次试商用基于北京现网800G广域智联无损网络,以及息壤一站式智算服务平台,在互联距离、带宽收敛比、模型参数方面,都去取得了重大突破,实现了多数据中心互联、资源整合支持商用模型分布式联合训练。

在广域智联无损网络技术方面,中国电信创新广域无损调度算法、关键帧识别技术,将带宽收敛比提升到32:1;创新WSON 50ms极速倒换技术,实现长距链路中断无感知切换。

系列技术有效解决了长距离传输中网络拥塞丢包、链路故障、建网成本等问题,确保了训练过程的稳定性和高效性。

在500公里的长距离传输下,网络传输吞吐率仍能保持在较高水平,为千卡千亿参数商用大模型的联合训练提供了坚实的网络支撑。

与此同时,息壤平台支持算力插件、跨地域算网协同、跨数据中心自动并行、断点续训等一系列关键技术能力,实现故障秒级定位、分钟级处理与恢复,保证了百川千亿参数商用模型的快速部署和稳定高效运行。

全球首个!中国电信完成千卡、千亿参数模型500公里联合训练试商用

【本文结束】如需转载请务必注明出处:快科技

责任编辑:上方文Q

文章内容举报

以上内容为资讯信息快照,由td.fyun.cc爬虫进行采集并收录,本站未对信息做任何修改,信息内容不代表本站立场。

快照生成时间:2025-01-23 17:45:07

本站信息快照查询为非营利公共服务,如有侵权请联系我们进行删除。

信息原文地址:

中国电信何忠江发布千亿参数大模型
11月10日消息,今天,中国电信2023数字科技生态大会暨2023数字科技生态展在广州正式启幕,电信多个高管轮流上阵发布了多项产品、平台及技术更新。其中,中国电信人工智能科技总经
2023-11-11 16:50:00
首个国产单池万卡液冷算力集群投入运营,满足万亿级大模型训练需求
天翼云上海临港国产万卡算力池正式启用。3月22日,中国电信宣布,天翼云上海临港国产万卡算力池正式启用,同时入驻首批用户。这是国内首个投入正式运营的国产单池万卡液冷算力集群,也是业
2024-03-23 09:09:00
...国际尖端人工智能技术迭代迅速。工信部最新数据显示,中国人工智能核心产业规模达到5000亿元人民币,企业数量超过4400家。人工智能的飞速发展正在给我们的生产生活带来巨变,以大
2024-05-17 10:14:00
本文转自:德宏团结报性能提升30%!中国电信进一步开源12B星辰大模型本报讯 近日,中国电信开源12B参数规模星辰语义大模型TeleChat-12B
2024-04-28 11:38:00
智算云生态大会成功举办 天翼云探索迈入发展新阶段
...际会展中心举办。在25日召开的云生态大会高峰论坛上,中国电信董事长柯瑞文在致辞中表示,天翼云作为国云的框架从基本成型到全面成型,“息壤”“云骁”“慧聚”三大平台的建成标志着天
2024-05-26 22:18:00
中国最大开源MoE模型,255B参数无条件免费商用,元象发布
元象XVERSE发布中国最大MoE开源模型:XVERSE-MoE-A36B,该模型总参数255B,激活参数36B,达到100B模型性能的「跨级」跃升
2024-09-18 13:36:00
中国电信在大模型领域成功布局ai技术
近日,中国电信人工智能研究院(TeleAI)联合北京智源人工智能研究院发布全球首个单体稠密万亿参数语义模型Tele-FLM-1T,成为国内首批发布稠密万亿参数大模型的机构。作为最
2024-06-26 11:49:00
【科技早报】董明珠首次回应格力落榜世界 500 强;X平台将移除“拉黑”功能
...你走到哪里,你和家里的电器都是一体的。”(IT之家)中国电信柯瑞文:正在打造可满足多个大模型同时训练的公共智算中心8 月 20 日消息,中国电信董事长柯瑞文在2023算力大会
2023-08-21 10:00:00
重磅!TeleAI 完成首个全国产化万卡万参大模型训练
近日,中国电信人工智能研究院(TeleAI)成功完成国内首个基于全国产化万卡集群训练的万亿参数大模型(万卡万参),并正式对外开源首个基于全国产化万卡集群和国产深度学习框架训练的千
2024-09-30 09:50:00
更多关于科技的资讯: