• 我的订阅
  • 头条热搜
“技术故障”背刺巴菲特,金融大模型到底靠不靠谱?
...市场瞬息万变,需要实时数据处理和决策支持,大模型的推理涉及到大量的矩阵乘法计算,对硬件的矩阵乘法计算能力提出较高要求,计算复杂性可能导致响应时间延迟,不利于实时应用。加之大模型训练和推理过程需要大量的...……更多
英伟达开源NVLM 1.0屠榜多模态!纯文本性能不降反升
...例如,OCRBench)的性能,但与低分辨率版本模型相比,在推理相关任务(例如,MMMU)上的准确率却会下降。此外,虽然开源的多模态大模型在视觉-语言任务上取得了非常亮眼的基准测试结果,但在纯文本任务上的性能却有显著...……更多
大模型为何纷纷降价
...“降价潮”。记者梳理发现,仅上个月,就有字节跳动、阿里、百度、腾讯等多家知名企业旗下的大模型降价。国家数据局局长刘烈宏在今年3月透露,中国10亿参数规模以上的大模型数量已超过100个。在业内人士看来,“百模大...……更多
近日,高通公司发布了新一代云AI推理加速卡——CloudAI100Ultra。这款产品专为生成式AI和大型语言模型而设计,提供相当于上一代产品四倍的性能。新款CloudAI100Ultra可部署的模型规模进一步扩大,单张150W的卡上可部署100B参数模...……更多
零一万物大模型Yi-34B夺得全球开源评测“双料冠军”,已在阿里云魔搭开源
...源发布首款预训练大模型Yi-34B,模型开放商用申请,已在阿里云魔搭社区ModelScope首发。魔搭第一时间推出了模型部署相关教程,供开发者参考并快速上手。零一万物此次开源的Yi系列模型包含34B和6B两个版本。据HuggingFace英文开...……更多
国产GPU万卡集群终于来了!摩尔线程CEO张建中:做难而正确的事
...的代表先后登台,对夸娥智算集群助力其在大模型训练、推理及具身智能的创新赞誉有加。加速一切大模型,只是第一步。张建中说,夸娥万卡集群不仅是加速AI,而是想要为美好世界加速。 一、大模型训练呼唤万卡集群,国...……更多
索泰ZOTAC推出GPU服务器系列产品
...选择,支持第三代和第四代英特尔至强处理器,适用于AI推理、数据科学、3D创作和游戏开发应用场景。Advanced系列——兼具强劲的性能与优秀的扩展性。本系列是Essential系列的优化升级版,全系列采用4U机架式服务器外形设计,...……更多
数字中国建设峰会抢鲜看:AI大模型“上天入地”融入各行各业
...广泛应用。(图说:人工智能是全场的焦点和亮点。图为阿里巴巴展台。)观众吴女士输入“高考加油”四个字,在屏幕上轻轻一点,一张独一无二的明信片就做成了。在“前沿技术创新突破”展区的阿里巴巴展台,明信片AI自...……更多
给小学数学题加句废话,OpenAI o1就翻车了,苹果论文质疑AI推理
苹果新论文:AI 大模型可能不会推理。AI 大模型(LLM)真的像我们理解的那样能「思考」或「推理」吗?最近,苹果的一篇论文探讨了这个问题,并且给出了一个倾向于「否」的答案。相关帖子被很多人围观。这篇题为「GSM-Symb...……更多
人工智能的第三支柱:数据存储
...周期,详细解读了AI管道六个阶段中数据从收集、训练到推理的存储细节。让我们简单了解一下人工智能数据周期的各个阶段。原始数据存档,内容存储:从各种来源安全高效地收集并存储原始数据,以用于训练模型。所收集数...……更多
李彦宏:大模型场景下开源是最贵的,多模态是通往AGI的必经之路
...ral发布的模型)都有相当的影响力,国内的智源、百川、阿里的通义也都是开源模型,市场上不缺百度这一家开源的模型。百度要开源还得自己去维护一套开源的版本,这不划算。李彦宏的判断是,闭源才有真正的商业模式,才...……更多
加速替代CUDA!摩尔线程开源vLLM-MUSA 加速国产GPU AI
...科技11月5日消息,近日,摩尔线程上线了大语言模型高速推理框架开源项目vLLM的MUSA移植版本,为开发者提供基于摩尔线程全功能GPU进行开源项目MUSA移植的范例。摩尔线程表示,正努力围绕自主研发的统一系统架构GPU、MUSA软件...……更多
GPU训Llama 3.1疯狂崩溃,竟有大厂用CPU服务器跑千亿参数大模型?
...The」。完整的回复,花了整整20个小时熟悉模型的训练和推理的朋友都知道,这些事情一点都不奇怪。集群搭建(GPU配置、网络设计、轨道优化等)、集群管理(实时监控、故障排除等)……个个都是「拦路虎」。对于缺乏相关...……更多
火山引擎丢出视频大模型「王炸」,云厂商从「价格战」回归「卷性能」
...始人闫俊杰向极客公园表示,从技术发展的角度看,模型推理成本 10 倍、百倍的降低是必然,只是时间问题,难的是通用模型的性能提升。在看到从 ChatGPT 到 GPT-4,性能出现了大幅提升时,大模型领域也沿着 OpenAI 在模型预训练...……更多
WOT全球技术创新大会2024北京站:探索AI 的无限可能
...老师带来精彩分享。AIGC时代的软件工程新范式专题作为阿里巴巴自研大模型,AoneCopilot如何通过代码补全、代码问答、代码评审workspace、Prompt市场等能力提升阿里内部研发效能?Fabarta团队在使用AIGC的过程中有哪些经验和教训?...……更多
AI服务器缺货真相调查:两天涨价30万,连“味精大王”都入场了
...加速卡等。相比于通用服务器,AI服务器更适应AI训练和推理的大算力、高并发、大数据流转等需求,已经成为大模型时代的“香饽饽”。以热门AI服务器型号浪潮NF5688M6服务器为例,某代理商在电商平台上挂出125万元的价格,这...……更多
微软宣布Team Copilot发布,年内将推出初步预览版
...电脑,二是在信息日益增加的世界,电脑能不能帮助人类推理、规划以及更有效地运用所有的信息。纳德拉认为,现在这波AI浪潮能为微软找到实现这两大梦想的答案。随后,Nadella聚焦Copilot。纳德拉提到了包含随时可用本地API...……更多
云巨头生态之变:从云计算到AI大模型时代
...不变的是变化”,这句话出自2023年变化最大的云厂商,阿里云CEO吴泳铭的全员信中。作为多年位居国内三朵云榜首的阿里云而言,公有云和被集成是2023下半年以来最大的两个变化,也是2024年的重点方向。同样地,阿里云的这种...……更多
宝德加速计算服务器市场规模再创新高,荣登中国NO.2
...纷纷加码入局,加速大模型的研发和应用。大模型训练和推理过程消耗海量算力,带动算力需求爆发式的增长,推动了中国智能算力规模的高速增长。面对新一轮人工智能发展机遇,宝德依托自身强大的技术研发实力和深厚的AI...……更多
阿里云荣获2023年度国家科技进步奖
...户端顾春6月24日,2023年度国家科学技术奖在北京公布,阿里云联合湖南大学等单位攻坚的“超算与智算融合计算关键技术及应用”成果,荣获2023年度国家科技进步二等奖。这是阿里云第三次获得该奖。大模型时代,从材料科学...……更多
AI驱动智慧办公革新浪潮,微软/阿里/微美全息加速数字办公垂直领域领航
...自然语言处理、智能任务管理和个性化工作建议。此外,阿里推出的通义千问,自面世以来,在文本生成、智能编码和文档处理等办公方面展现出较强的能力。其2.0版本在理解力、逻辑推理、指令执行和编程方面进行了改进,尤...……更多
...字节跳动发布豆包大模型,定价比行业降低约99%,随后,阿里、百度、腾讯等相继宣布降价,将竞争推向白热化。这究竟是加速技术普及的前奏,还是只是一场资源消耗战?“目前的价格战加速行业洗牌,行业门槛也会进一步抬...……更多
ai生命周期:ai训练和ai推理的完美结合
...命周期包括最重要的两个部分,一个是AI训练,一个是AI推理。其中,AI训练就是让模型识别数据模式,是数据和处理最密集的部分,需要大规模的算力。在这一阶段,往往优先使用大规模并行的GPU加速器或专用的AI加速器,有时...……更多
阿里云CEO吴泳铭:AI发展速度超过任何时期
快科技9月19日消息,2024云栖大会在杭州开幕,阿里巴巴集团CEO、阿里云智能集团董事长兼CEO吴泳铭在2024云栖大会上发表主题演讲。吴泳铭表示,过去22个月,AI发展的速度超过任何历史时期,但我们现在依然还处于AGI变革的早...……更多
罗格斯大学团队提出思想链概念,提高大模型的算数推理能力
...概念,提高了大语言模型(LLM,large language models)在复杂推理任务上的性能,例如算术推理、常识推理和符号推理等。图 | 金明宇(来源:金明宇)CoT 的原理是通过提供推理过程的示例,来教会模型处理推理,详细说明导致最...……更多
生成式AI时代:AI服务器前景广阔,浪潮信息营收大增8成
...一。值得注意的是,2023年需求以模型训练为主,2024年起推理需求应该会逐渐增加,根据第三方(IDC)预测,2024 年推理需求大致会占到总需求的55%左右。浪潮信息在全球市场斩获颇丰,在于不断突破与提升在硬件、算力、算法等多...……更多
NPU全球出货超1亿颗!芯原如何迎战大模型时代的边缘计算变革?
...C9X00AI是AI-GPU/AI-PC,Tensor Core GPU IP CCTC-MP则面向大语言模型推理、训练。芯原NPU IP研发副总裁查凯南谈道,NPU的发展近年来大概有三个方向:首先是DEEP AI,在很多嵌入式设备里面,要把AI跟其它的处理IP做比较紧耦合的绑定,可以...……更多
随着大模型的发展日新月异,其推理和训练的边界问题也引起了广泛讨论。近日,清程极智CEO汤雄超在一场行业活动中明确表示,尽管外界有声音认为OpenAI发布的o1模型模糊了推理和训练的界限,但从技术角度来看,这两个阶段...……更多
微软难以摆脱英伟达 |焦点分析
...速增长,存储数据需要花费的成本越来越稿,这也是后来阿里决定进军云计算产业的重要原因。如今,同样的困境摆在微软、谷歌等一众云巨头公司面前,只是瓶颈从数据中心变成了建数据中心的芯片。这种对高性能AI芯片的渴...……更多
并行科技:北交所上市一周年,高质量发展稳中提质
...个高性能计算核心,具备成熟且强大的技术服务能力,与阿里云、华为云等头部企业处在同一梯队。“北交所上市一年来,公司先后进入北证50指数、荣获专精特新“小巨人”企业、成为‘北京市通用人工智能产业创新伙伴计划...……更多
更多关于科技的资讯:
俞敏洪对网暴不忍了!东方甄选:从未有人在任何场合辱骂董宇辉 将对造谣者追责
快科技1月8日消息,今日,东方甄选发布声明称,个别自媒体传播不实谣言称,东方甄选曾有人辱骂董宇辉,并且“将文稿和样品甩到宇辉脸上”
2025-01-08 16:49:00
5499元起 石头G30自清洁扫拖机器人发布:三线结构光避障
石头G30自清洁扫拖机器人今日正式发布,该款机器人支持三线结构光避障、行业首创底盘升降,售价5499元起。据悉,石头G30的智能组合避障系统还采用三线结构光设计
2025-01-08 16:49:00
双14寸120Hz OLED屏幕!联想新款YOGA Book 9i笔记本发布:1999美元
快科技1月8日消息,联想在CES 2025展会上发布了全新的YOGA Book 9i 14笔记本,搭载了双14英寸120Hz OLED触摸屏和诸多AI功能
2025-01-08 16:49:00
每年休假150多天!胖东来2024员工平均月薪9000余元 于东来发声
快科技1月8日消息,在许昌这个城市,员工月薪平均月薪9000余元,这已经相当可观了。于东来在社交平台发消息表示,“2024年
2025-01-08 17:19:00
i9-14900HX+RTX4070双强芯!微星泰坦18 Pro图赏
快科技1月8日消息,微星泰坦18 Pro笔记本新配置目前已经上架,采用i9-14900HX + RTX4070组合,售价为17999元
2025-01-08 17:19:00
快科技1月8日消息,据媒体报道,美国加利福尼亚州南部地区7日突发野火,火势在强风助推下迅速蔓延,周边地区约3万人被紧急疏散
2025-01-08 17:19:00
哪吒汽车回应官网异常事件:造谣抹黑的人已取证
快科技1月8日消息,近期,哪吒汽车官网因技术原因出现短暂无法访问的情况,引发部分自媒体及网友的广泛关注和讨论。有人认为造车新势力又倒闭一家
2025-01-08 17:49:00
微星推出特别版RTX 5090显卡:配备5个风扇!
快科技1月8日消息,在2025年CES展会上,MSI微星预告了两款特别版NVIDIA GeForce RTX 5090显卡
2025-01-08 17:49:00
友商都没搞定!真我率先落地7000mAh+百瓦闪充:一骑绝尘
快科技1月8日消息,博主数码闲聊站爆料,真我率先搞定了7000mAh+百瓦闪充方案,友商都没有做到。在大电池+闪充领域
2025-01-08 17:49:00
网友称百度搜索带上李彦宏秒变无广告版:官方回应
快科技1月8日消息,在你想要百度搜索的内容后面加上李彦宏,就可以变为纯净无广告版,真的这么神奇吗?近日,有网友称在百度搜索引擎进行搜索时
2025-01-08 17:49:00
小鹏高管发文暗示:本周将会有台“很厉害的车”
快科技1月8日消息,小鹏汽车品牌公关负责人在社交媒体上暗示,本周工信部公告将展示一款“很厉害的车”。这一操作引发网友和博主的期待和猜测
2025-01-08 17:49:00
机械革命苍龙16 Ultra拥抱AMD锐龙9 9955HX:搭档RTX 5090双烤高达280W
快科技1月8日消息,机械革命今年首次亮相CES展会,并且趁着Intel、AMD、NVIDIA同时发布新平台之际,带来了多款重磅新品
2025-01-08 18:19:00
95后小伙一天喝3瓶饮料双手畸形:痛风石变形如生姜
快科技1月8日消息,据报道,95后小伙蓝先生(化名)患痛风十五年,双手因痛风石变形如“生姜”,其发视频呼吁大家多喝水少喝奶茶饮料
2025-01-08 18:49:00
小机箱绝配!RTX 5090 SFF仅此一款
快科技1月8日消息,今年6月份,NVIDIA首次公布了“对小机箱友好”的SFF-Ready显卡规范,让玩家在组装小机箱主机时
2025-01-08 18:49:00
270W性能猛兽!雷神发布首款18寸游戏本ZERO 18:RTX 5090+两项行业首发
快科技1月8日消息,在CES 2025上,雷神将发布首款18寸游戏本ZERO 18,以及16寸的ZERO 16。核心配置方面
2025-01-08 18:49:00