• 我的订阅
  • 头条热搜
Oracle四季度125亿美元销售合同背后:OpenAI用上Oracle云,模型推理或是关键
...系没有变化,与OCI的合作是,基于OCI使用Azure AI平台进行推理和其他需求。”不过,这并不影响Oracle仍需构建大规模数据中心,以支撑来自OpenAI的工作负载。据Oracle董事长兼首席技术官拉里·埃里森(Larry Ellison)在业绩会上解释...……更多
大模型降价背后,国产大模型的竞争逻辑变了
...市场拱手让人。另一方面,随着大模型产业的快速发展,推理成本飞速下降,也成为终端降价的基础。据百度官方透露,相比一年前,文心大模型的算法训练效率提升到了原来的5.1倍,周均训练有效率达到98.8%,推理性能提升了1...……更多
16家头部大模型公司上海神秘碰头,现场人挤人人人
...最为关键的三大层面,即:算力层:用于基础模型训练和推理的基础设施 模型层:使用基础模型加速生成式AI应用构建 应用层:开箱即用的生成式AI应用至于能力如何,我们直接来看下最为直观的效果。在生成式AI应用方面,...……更多
Kimi爆火背后:访问量仅次于文心一言和阿里通义,国内外大模型都在卷上下文
...次采取扩容等措施保证流量异常增高后的稳定,这对Kimi推理算力、成本等也构成挑战。实际上,长文本能力已是国内外大模型追逐热点。复旦大学计算机科学技术学院教授张奇对搜狐科技表示,很多大模型仅停留在长度和简单...……更多
AI服务器缺货真相调查:两天涨价30万,连“味精大王”都入场了
...加速卡等。相比于通用服务器,AI服务器更适应AI训练和推理的大算力、高并发、大数据流转等需求,已经成为大模型时代的“香饽饽”。以热门AI服务器型号浪潮NF5688M6服务器为例,某代理商在电商平台上挂出125万元的价格,这...……更多
字节、阿里云、百度大模型价格混战:低价背后是数据竞争,爆款尚未出现
...云事业部总裁刘伟光表示:“阿里云这次大幅降低大模型推理价格,就是希望加速AI应用的爆发。我们预计2024年大模型API的日调用次数有望突破100亿。”上周,字节跳动刚刚高调入局大模型战场,豆包主力模型在企业市场的定价...……更多
浪潮通软应邀参加“海右论道”智库沙龙,共话AI大模型发展机遇
...务。智能对话平台基于浪潮海岳大模型的语言理解、逻辑推理、内容创作等可持续演化的能力,打造了智能对话平台,具备知识管理、技能管理、多轮对话、对话策略等核心功能,支持常见问题问答、文档问答以及任务型处理等...……更多
收入占比40%、电话会议点名16次,英伟达:推理端的需求被低估了
...让人印象深刻的是,英伟达在财报电话会议的一个观点:推理端的爆发,可能很多人还是低估了。据英伟达电话会议披露,公司全年数据中心里已经有40%的收入来自推理业务,超出了绝大部分人预期。而在这次财报电话会议里,...……更多
大模型推理乘上RISC-V快车?国内AI芯片创企推大模型系列一体机
...并发、技术自主可控方面具有优势的新选择。AI大模型在推理侧的新机遇与RISC-V创新架构具有的可扩展性、可编程性、超大规模等优势特点不谋而合。技术和场景应用的双重优势下,希姆计算的大模型一体机能支撑企业将基座模...……更多
手机市场深陷泥沼,厂商如何破冰?
...4位量化技术,实现精度不掉点效果下更优的性能,通过推理引擎的加速,以及芯片硬件加速的方式,更是成为行业首个端侧应用的70亿参数的模型。基于来自端侧的70亿大模型参数,FindX7能够实现比其他手机更快速的大模型响应...……更多
阿里云通义千问主力模型价格直降97%,大模型商业化拐点已至
...大模型性能逐渐提升,AI应用创新正进入密集探索期,但推理成本过高依然是制约大模型规模化应用的关键因素。云厂商的降价策略,不仅是对当前市场的一次重大推动,更是对未来商业智能化转型的一次深远布局。阿里云智能...……更多
AMD MI300绝杀英伟达H100?跑GPT-4性能超25%,AI芯片大决战一触即发
...,因此它们一直被诟病生成的回答是基于概率,而非基于推理。这也就意味着,在当前的AI热潮中,这些模型架构可能无法幸存下来。毕竟,由于发展速度太快,如今的LLM寿命相对较短。昨天还炙手可热的模型,一两周后可能就...……更多
罗格斯大学团队提出思想链概念,提高大模型的算数推理能力
...概念,提高了大语言模型(LLM,large language models)在复杂推理任务上的性能,例如算术推理、常识推理和符号推理等。图 | 金明宇(来源:金明宇)CoT 的原理是通过提供推理过程的示例,来教会模型处理推理,详细说明导致最...……更多
科学家竞相破解大型语言模型背后的谜团
...复杂行为。面对复杂问题,人类在潜意识里会进行分步骤推理。受此启发,谷歌团队2022年引入了“思维链提示”,以描述一种让LLM展示其“思维”的方法。简单来说,思维链提示是一种特殊的上下文学习。不同于标准提示只给...……更多
李彦宏:进一步提升“文心一言”产品采用率
...始人、董事长兼首席执行官李彦宏透露,百度文心大模型推理成本已降至1%。李彦宏表示,自发布以来,百度不断降低文心大模型的推理成本,“文心一言”3.5版本的推理成本是3.0版本的1%。通过推理成本的不断降低,越来越多...……更多
摆脱Transformer依赖?这家AI初创公司推出国内首个非Attention机制大模型
...能效果——记忆能力提升3倍、速度提升7倍的同时,实现推理吞吐量的5倍提升。 至于为何另辟蹊径,寻求非Transformer的大模型路径,岩芯数智CEO刘凡平指出,以大规模著称的Transformer,在实际应用中的高算力和高成本,让不少中...……更多
...话会上还表示,自发布以来,百度不断降低文心大模型的推理成本,目前已降低至去年3月版本的1%。随着推理成本的降低,越来越多的用户和企业开始使用文心大模型。百度2023年年报显示,2023年百度实现总营收1345.98亿元,归属...……更多
AI行情再度席卷而来,机构看好这三个细分赛道丨ETF观察
...题。此外,AI模型升级迭代的背后是对海量数据的训练和推理,2012年以来全球算力需求快速增长,但算力服务器集群之间的数据交换需要数据中心内部的网络互联做配套,从而激发出对高速率光模块的大量需求,推动光模块行业...……更多
大模型价格战“卷”向何方?|深度
...千亿参数MoE架构模型。MoE架构中基于多个专家并行机制,推理时只激活部分专家,以稀疏性压缩了参数数量和推理成本。“这就可以极大地节省算力耗费”。而率先掀起价格战的幻方DeepSeek-V2,就是其通过架构创新,实现了大模...……更多
对话云天励飞董事长陈宁:2030年人类将实现AGI,推理芯片将是蓝海市场|钛媒体AGI
...拥有一个AI Agent。“如果说2024年是大模型落地应用之年,推理就会越来越重要。此前在训练芯片市场上,英伟达一骑绝尘,占有绝对的市场占有率,那么今天,推理芯片市场没有垄断性的巨头。这不仅是万亿级、万亿颗芯片的蓝...……更多
全球都在搞AI,为什么是百度挣到钱?
...,李彦宏透露,自发布以来,百度不断降低文心大模型的推理成本,目前已降低至2023年3月版本的1%。随着推理成本的降低,越来越多的用户和企业开始使用文心大模型。这意味着不论是对于企业还是开发者,基于文心大模型开...……更多
...展开紧密协作,共同致力于本土算力和大型模型的训练与推理技术的发展。11月初,云从科技在投资者关系平台上答复投资者关心的问题时称,公司已与华为签署了全面合作框架协议,并已联合发布了从容大模型训推一体化解决...……更多
系统级玩家微软、苹果先后出牌,端侧大模型路径清晰了?
...MGSM(跨语言数学能力)提升 2.3%,而DROP(文本段落分析推理)则下降了 3%。但与此同时,杀手级应用仍未出现。根据第三方网站SimilarWeb的监测数据,早在去年6月,ChatGPT流量即已见顶,当月其网站与移动客户端的全球流量(PV)...……更多
只用 13 天,OpenAI 做出了能听、能说、能自主决策的机器人大模型
...破,由 OpenAI 与 Figure 共同做出。OpenAI 提供负责提供视觉推理和语言理解,而 Figure 的神经网络提供快速、低水平、灵巧的机器人动作。机器人所做出的所有行为都是出于已经学习过,内化了的能力,而不是来自远程操作。研究...……更多
李彦宏:大模型场景下开源是最贵的,多模态是通往AGI的必经之路
...练效率提升到了原来的5.1倍,周均训练有效率达到98.8%,推理性能提升了105倍,推理的成本降到了原来的1%。会上,百度发布了文心大模型4.0的工具版,该工具版可以让开发者体验代码解释器功能,开发者不仅可以通过自然语言...……更多
...理陈宁介绍,DeepEdge10是国内首创的国产14nm Chiplet大模型推理芯片,采用自主可控的国产工艺,内含国产RISC-V核,支持大模型推理部署。依托自研芯片DeepEdge10创新的D2D chiplet架构打造的X5000推理卡,已适配并可承载SAM CV大模型、Lla...……更多
面壁智能发布2B模型:适配主流手机,推理成本仅为GPT-4的1/360 | 最前线
...在MMLU(多任务语言理解)、Knowledge(知识)、Reasoning(推理)、Comprehension(理解)等关键指标上均超越了Meta Llama 2的13B模型。这一个故事,在2024年2月1日的发布会上,也被AI模型层公司面壁智能的CEO李大海不断提起。对标Mistral..……更多
近日,高通公司发布了新一代云AI推理加速卡——CloudAI100Ultra。这款产品专为生成式AI和大型语言模型而设计,提供相当于上一代产品四倍的性能。新款CloudAI100Ultra可部署的模型规模进一步扩大,单张150W的卡上可部署100B参数模...……更多
...算效率和算力开销两大问题成为新的行业焦点。对大模型推理成本的优化,可通过很多技术手段实现。首先是模型本身,模型结构、训练方法都可以持续改进,包括业界很关注的MoE(混合专家模型),就是优化推理成本很好的解决...……更多
突破遥感基础模型关键技术!我国科研人员研发出遥感智能训推一体机
...然而,遥感单幅影像幅宽大、基础模型参数规模大,导致推理速度与应用场景较为受限。近日,中国科学院空天信息创新研究院(空天院)科研团队基于自主研制的遥感智能解译基础模型,联合国内相关研发机构,共同研发出“...……更多
更多关于财经的资讯:
每斤售价低于1元 贵阳盒马推出惠民蔬菜专区
老南瓜、麻叶白菜、土豆、白萝卜……每斤价格只要0.98元。11月28日,记者在贵阳市盒马鲜生荔星店了解到,为保障市民冬季“菜篮子”
2024-11-29 16:24:00
《关于推动上海地区商业养老保险高质量发展的行动方案》出炉!
为深入贯彻落实中央金融工作会议关于做好“养老金融”的决策部署,积极应对人口老龄化问题挑战,全面践行金融工作的政治性、人民性
2024-11-29 16:27:00
利欧股份3涨停
中国经济网北京11月29日讯利欧股份(002131.SZ)今日股价涨停,截至收盘报3.67元,涨幅9.88%,总市值248.51亿元。该股此前2个交易日涨停。
2024-11-29 16:34:00
抖音去年电商广告收入4000亿元?抖音集团副总裁李亮回应:与事实严重不符
近日,有报道称,名创优品创始人叶国富在朋友圈点评抖音电商环境恶化:“大家醒醒吧,字节去年2万亿的GMV却收了4000亿的广告费
2024-11-29 16:35:00
梦金园上市净募4.5亿港元首日涨7.5% 盘中一度破发
中国经济网北京11月29日讯梦金园黄金珠宝集团股份有限公司(以下简称“梦金园”,02585.HK)今日在港交所上市,盘中一度跌破发行价
2024-11-29 16:36:00
生意宝3涨停
中国经济网北京11月29日讯生意宝(002095.SZ)今日股价涨停,截至收盘报29.23元,涨幅10.01%,总市值73.87亿元。该股此前2个交易日涨停。
2024-11-29 16:37:00
农行武鸣支行:小微企业融资协调工作机制助力乡村振兴
本文转自:人民网-广西频道“再过两个星期,我们果园就要开始采果上市了,农行这边贷款真是及时!”近日,南宁市武鸣区一家沃柑种植企业负责人戴老板表示
2024-11-29 16:43:00
金融市场业务操作风险审计分析
金融市场业务具有“种类丰富、对手众多、资金量大、结构复杂、时效性强”等特点,农商行作为地方性法人机构,在发展金融市场业务的过程中
2024-11-29 16:48:00
农发行宿迁市分行:抢抓“四早”助力秋收“四好”
秋粮收购信贷工作,是农发行服务国家粮食安全战略、保护种粮农民利益、维护粮食市场稳定的重要举措和责任担当。农发行宿迁市分行切实提高政治自觉
2024-11-29 16:48:00
中信银行长春景阳大路支行开展“冬日传递温暖”金融宣教活动
为切实提升消费者金融防范意识,履行社会责任,近日,中信银行长春景阳大路支行通过沙龙形式,为客户开展“冬日传递温暖”金融宣教活动
2024-11-29 16:50:00
金融适老化系列调查 | 金融机构网点适老改造当“软硬兼施”
中国消费者报报道(记者聂国春)随着科技的飞速发展,金融服务的数字化、智能化趋势愈发明显。上海银翱咨询公司今年年中面向近千名银行网点员工开展的调查显示
2024-11-29 16:51:00
平安养老险吉林分公司开展消防知识宣传活动
为积极响应国家金融监管总局吉林监管局关于开展银行业保险业2024年消防宣传月活动要求,近日,平安养老险吉林分公司开展“全民消防
2024-11-29 16:51:00
中国太保寿险2024年蓝鲸协会年度峰会召开
日前,中国太保旗下中国太保寿险2024年蓝鲸协会年度峰会在福建厦门召开,来自全国近千位蓝鲸协会会员到场参会并接受表彰。蓝鲸峰会是中国太保寿险年末的表彰会
2024-11-29 16:51:00
秦洪看盘|增量预期再起,扩张型产业主线领涨
周五A股市场在早盘一度低位震荡。但随着大金融股的迅速拉升,主要股指随之节节走高,尤其是人形机器人等成长扩张型产业链个股出现了领涨态势
2024-11-29 16:55:00
云南省副省长王浩履新中国信保党委书记,曾长期任职于建行
中国信保一把手调整。11月29日下午,中央组织部有关负责同志出席中国出口信用保险公司干部会议,宣布中央决定:王浩同志任中国出口信用保险公司党委书记
2024-11-29 16:55:00