• 我的订阅
  • 头条热搜
专家模型不要专家并行!微软开源MoE新路径
...和数学表现出色。继Phi家族之后,微软又开源了新的混合专家大模型——GRIN MoE。与Phi-3.5同样的个头(16 * 3.8B),却采用了截然不同的训练方法。这个「不走寻常路」如果写个太长不看版,那就是两句话:1. 使用新一代SparseMixer...……更多
系统级玩家微软、苹果先后出牌,端侧大模型路径清晰了?
...建议,这相当于在电脑中内置了一个永远不厌其烦的游戏专家,而且所能提供的建议是开放式的,远远超出了只有固定剧本的NPC(非玩家控制角色)概念。与微软形成鲜明对比,苹果则显然没有打造杀手级应用的执念。Apple Intell...……更多
微软连发3款Phi-3.5模型:128K上下文,首用MoE架构,部分性能超GPT-4o mini
...示例的MMLU测试中击败了GPT-4o mini。这是微软首次使用混合专家模型架构。这一模型系列中最小的Phi-3.5-mini-instruct在长上下文代码理解任务以明显优势击败Llama-3.1-8B-instruct和Mistral-7B-instruct,而其参数规模还不到Llama……更多
谷歌和微软两位“印度老乡”CEO,正面硬刚
...,Pichai还讲道:“在57项测试中,Gemini的表现有89%与人类专家相当。这是第一个达到这一标准的模型。”言外之意,Gemini已然超过了其最大竞争对手、OpenAI发布的GPT-4。而后者是在其“印度老乡”Satya Nadella掌舵的微软投资支持下...……更多
微软的AI赌局,谷歌为何没敢接
...,也可以叫做‘真正的语义搜索’。”一位百度搜索技术专家告诉虎嗅,隐式搜索不再是单纯的字面搜索,而是利用AI分析用户关键词语的深层意思。例如,搜索“现实版钢铁侠”,得到的搜索结果就都是马斯克相关的内容。此...……更多
大模型新趋势之MoE:现状、挑战及研究方向
...涵、优势、发展历程及主要玩家MoE(MixtureofExperts,混合专家模型)是一种用于提升深度学习模型性能和效率的技术架构。其主要由一组专家模型和一个门控模型组成,核心思想是在处理任务时只激活部分专家模型,并通过门控...……更多
...力,业内一直有不同看法。相比马斯克的乐观预测,不少专家认为这一时间还要再晚一些。谷歌旗下人工智能公司“深层思维”的联合创始人德米斯·哈萨比斯判断,通用人工智能或在2030年实现。韩国首尔大学电子与计算机工程...……更多
AI大模型产业如何突破?专家学者企业齐聚探讨发展新模式新路径
活动现场。主办方供图华龙网讯(记者 梁浩楠)11月15日,重庆市人工智能产业发展暨大模型场景应用研讨沙龙在两江新区成功举办。来自科研院所、高校、企业等70多位嘉宾,共同探讨和分享人工智能大模型在各领域落地应用...……更多
“大模型”时代 路凯智行如何Rock AI
...ckAI路凯智行联合创始人兼CTO那崇宁博士是AI大模型领域的专家,长期从事相关领域的研究和应用。早在2018年谷歌推出BERT的时候,那崇宁博士就断定未来5年在自然语言处理领域内会实现一个通用的人工智能,只会在自然语言处理...……更多
微软研究人员正在测试其他ai模型
...信赖且可以有效使用的”。我们可以向这个领域投入许多专家和资源,因此我们认为自己可以帮助阐明“应该如何负责任地使用新型AI技术”的方法,并使其他人也能够做到这一点。从技术角度来讲,AI幻觉是一种“缺乏事实依...……更多
传微软向Inflection AI支付6.5亿美元,获其AI模型授权!美国监管机构加大审查
...交易类似于“收购雇佣”,但并非收购。一些法律和行业专家指出,微软如果收购Inflection可能引发美国监管机构的反垄断担忧,美国监管机构正越来越多地审查大型科技公司的人工智能投资和合作伙伴关系。据一位知情人士透...……更多
马斯克打脸OpenAI!全球最大模型Grok-1开源
...Rust的自定义训练堆栈、从头开始训练的3140亿参数的混合专家(MOE)模型,远超OpenAI的GPT模型。而此次开源的模型是是Grok-1预训练阶段的原始基础模型,没有针对任何特定应用(例如对话)进行微调。对此,英伟达科学家Jimfan评...……更多
AI PC,联想Ready for PC | 焦点分析
...还能跑得好。”郑爱国对36氪表示,“目前AMD、英特尔的专家都在我们办公室,和我们的专家联合对他们最新的平台和芯片调优。” 当然,Framework仍然是软硬件磨合期的产物。“未来,下载安装即用的模式也一定是AI软件在PC上...……更多
大厂 XR 业务线“躁动”,AIGC 能救场吗?
...觉大模型增强认知能力、多模态大模型提高创作能力。有专家表明,大模型不仅仅有针对语言的还有针对多模态的,未来还应该有针对元宇宙的,比如空间计算大模型,现在市面上基本还没有,应该是未来两三年相关公司需要去...……更多
200余位顶尖学者和产业专家共议人工智能热点问题
...在中关村展示中心开幕。200余位人工智能顶尖学者和产业专家,围绕人工智能关键技术路径和应用场景等问题展开主题演讲和尖峰对话。6月14日,第六届北京智源大会在中关村展示中心开幕。中国经济网记者马常艳 摄科学技术...……更多
谷歌DeepMind推Imagen2;ChatGPT Plus恢复订阅;OpenAI提出用小模型监督大模型 | 本周硅谷发生了什么?
...量、逼真的人工智能图像生成器。Mistral AI发布Mixtral 8x7B专家混合模型,表现优越且推理速度更快。由于获得更多GPU,ChatGPT Plus重新开放订阅,提供更好的用户体验。OpenAI首席科学家Ilya Sutskever入选Nature年度十大科学人物,表彰其...……更多
OpenAI断供API 套壳公司何去何从
...服务、零成本SDK迁移工具、大模型业务迁移与使用的免费专家指导,覆盖大模型从开发到应用的全生命周期流程。腾讯云也在6月25日发布大模型迁移方案,新迁移企业用户可免费获得腾讯混元大模型1亿Tokens。目前,腾讯云提供...……更多
收到关注函依然连续涨停,中科金财AI概念到底有多硬?
...开业务合作研讨会。在会上,中科金财团队与微软中国的专家就Sora在国内银行、电商、网剧等垂类领域的多场景应用进行了广泛讨论。令市场关注的是,该公司称“微软专家表示,基于双方的友好合作,在OpenAI将Sora商用化能力...……更多
微软、英伟达纷纷押注小模型,大模型不香了?
...州波士顿,是一所顶尖的私立研究型大学)语言模型研究专家Aaron Mueller指出,扩展参数数量并非提高模型性能的唯一途径,使用更高质量的数据训练也可以产生类似效果。OpenAI首席执行官阿尔特曼在4月的一次活动中表示,他相...……更多
深交所紧急发函! ChatGPT成多公司翻身密码?谷歌、微软也出手了
...并有望形成万亿级市场规模。”天使投资人、知名互联网专家郭涛告诉21世纪经济报道记者。搜索引擎:百度、三六零将推出类似ChatGPT产品国内方面,今年1月底,百度宣布将推出类似ChatGPT的AI聊天机器人。2月7日,百度对21世纪...……更多
微软论文一张截图,曝出GPT-3.5仅有200亿参数?AI圈巨震,网友大呼太离谱!
....5在技术和其他方面有着什么样的联系?GPT-3.5是一个个小专家模型的集成还是一个通才模型?是通过更大模型的蒸馏还是更大数据训练?这些问题的答案只能等到真正开源的时候才能揭晓了。 ……更多
谷歌王者归来?最新推出的大模型到底有多强,能否挑战GPT-4
...在MMLU的得分率达到90.0%,是第一个在MMLU测试中超过人类专家的模型。Gemini在MMLU的得分率首次超过人类专家。来源:官方视频 Gemini包括一套三种不同规模的模型:Gemini Ultra是最大、功能最强大的类别,被定位为GPT-4的竞争对手;...……更多
...enAI和StableDiffusion等。有些AI伦理学家担心,在信任和安全专家能够研究这些风险之前,大型科技公司匆忙进入市场可能会让数十亿人面临潜在的危害,比如分享不准确的信息、生成假图像或让学生有能力在学校考试中作弊。该领...……更多
深度剖析:谷歌、微软等AI巨头承诺的“自愿监管”做到了吗?
...其进行内部和外部安全测试。这项测试的一部分将由独立专家执行,旨在防范一些最重要的人工智能风险来源,例如生物安全、网络安全以及更广泛的社会影响。所有公司(不包括 Inflection,该公司选择不予置评)均表示,他们...……更多
蚂蚁井贤栋:通过专业智能体的深度连接,AI会像互联网一样带来服务的代际升级
...通过知识引擎为大模型提供“专业教材”,让大模型具备专家知识水平。垂直领域、高质量的数据往往以多种模态存在,体系庞杂,比较分散,对隐私保护和资产价值保护的要求高,很难直接“喂给”通用大模型。井贤栋介绍,...……更多
苹果300亿参数大模型首亮相,还买了家AI公司|焦点分析
...建筑材料”和“施工方法”。 模型架构上,使用了混合专家(Mixture of Experts, MoE)架构是MM1的亮点之一,苹果探索发现,在模型的前馈网络层中使用MoE架构,可以有效地扩展模型的容量而不牺牲推理速度。我们可以将MoE架构理...……更多
「海纳AI」完成数千万元A轮融资,为企业提供AI面试服务|36氪首发
...海纳产品时,将几百组AI对候选人的打分,与企业内部HR专家的打分相比对,准确度达到97.76%。其中优秀组(即70分以上)和较差组(即30分以下)的打分准确度达到100%。之所以能做到高准确度,首先是在于背后的AI技术和海量优...……更多
回顾GPT大模型2023这一年,5大顶级公司预测2024年AI产品
...,就连那些原本习惯于“慢慢”打磨产品的大洋彼岸的AI专家们也进入了“满负荷”状态。梁正表示:“在谷歌、微软或OpenAI的办公室里,你能感受到他们的工作节奏至少比之前快了两倍。”这一切都是因为以ChatGPT为代表的大语...……更多
李彦宏称开源赶不上闭源?Meta发布最强开源模型,马斯克评价“还不错”
...天工3.0”基座开源大模型,成为全球最大的开源MoE(混合专家)大模型。不过,在最新的采访中,扎克伯格表示,Meta的目标不是与开源模型竞争,而是要超过所有人,打造最领先的人工智能。他提到,今年晚些时候发布的Llama 3-...……更多
Pika爆火,但AI视频还没到「GPT时刻」;首个GPT-4驱动的人形机器人;微软小模型击败大模型丨AI新零售早报
...转换为机器人动作。(来源:“量子位”微信公众号)《微软小模型击败大模型:27亿参数,手机就能跑》微软发布了一个仅有27亿参数的小型模型Phi-2,它在多数常识推理、语言理解、数学和编码任务上超越了其他大型模型。尽...……更多
更多关于科技的资讯:
长春巨型“充电宝”并网投运
本文转自:人民日报海外版《人民日报海外版》(2024年12月27日第 02 版)在国网长春供电公司积极推进建设下,吉林长春五棵树220千伏变电站内的磷酸铁锂储能电站项目日前顺利并网投运
2024-12-27 04:38:00
企元数智免费小程序:企业内容营销的破局利刃
一、企元数智免费小程序——企业营销的新曙光在当今数字化浪潮的席卷下,企业营销领域正经历着深刻的变革与激烈的竞争。众多企业纷纷陷入营销困境
2024-12-27 05:44:00
企元数智免费小程序:开启企业智能客服升级新篇章
在数字化浪潮汹涌澎湃的当下,企业的服务质量和效率成为了竞争的关键利器。客户对于快速、准确、个性化服务的期望日益攀升,传统客服模式在应对这一挑战时显得力不从心
2024-12-27 05:50:00
解析企元数智免费小程序如何增强企业用户粘性
在当今数字化商业浪潮中,用户粘性已成为企业能否持续发展壮大的关键因素之一。而企元数智免费小程序的出现,为企业提升用户粘性提供了一条创新且高效的途径
2024-12-27 05:54:00
本文转自:人民日报江苏推进“智改数转网联”,累计实施改造项目约5.6万个给工厂装“大脑”  让产线上“云端”(高质量发展看亮点·走一线)本报记者  王伟健核心阅读上门诊断
2024-12-27 06:15:00
2.0版本“上新”!海量信息触手可及 “解锁”一张指尖上的就业地图
从手绘纸卷到数字影像,地图从来都不只是地理标识,而是探索未知、追逐梦想的指南。在今日的杭州,就有一张特殊的地图,它不绘于纸张
2024-12-27 07:02:00
2024年,杭州产业发展热潮涌动,新旧动能转换澎湃有力。人形机器人、智能网联车、《黑神话·悟空》、演唱会、新生代杭商……一个个充满活力的“细胞”
2024-12-27 07:02:00
马斯克的“省钱大师”登陆华盛顿:正为美国政府效率部招兵买马
综合多家媒体报道,埃隆·马斯克的长期副手史蒂夫·戴维斯(Steve Davis)正帮助美国拟设立的“政府效率部”招聘员工
2024-12-27 07:07:00
复旦教授呼吁年轻人减少欲望:过度追求易陷入不满与失落的循环
12月27日消息,近日,复旦教授梁永安在演讲中呼吁年轻人减少欲望,强调个人欲望减法对社会做加法的重要性,引发广泛关注。当下
2024-12-27 07:07:00
郭有才说走红像“做梦一样”:爆红是一种偶然
12月27日消息,据媒体报道,因翻唱《诺言》出圈,郭有才上半年走入了流量中心。半年多过去后,郭有才在接受采访时表示,他走红像“做梦一样”
2024-12-27 07:07:00
怎么找工作、领补贴?杭州就业创业一张图帮到你
制图 刘婧楠近日,杭州拿下重量级大奖——中国年度最佳促进就业城市。这是一个综合评定政府就业服务水平的奖项,从城市就业人口情况
2024-12-27 07:33:00
iPhone SE 4领衔!苹果2025上半年新品爆发:5款大作已在路上
快科技12月27日消息,据媒体报道,尽管iPhone通常在9月份亮相,但在2025年上半年,苹果将带来包括iPhone在内的5款重磅新品
2024-12-27 07:37:00
70岁董明珠谈从格力退休:股民、员工都不想我退休
快科技12月27日消息,日前,格力电器董事长董明珠与新浪财经CEO邓庆旭对话时再次谈及了“明年是否会退休”的话题。邓庆旭表示
2024-12-27 07:37:00
理想同学上架苹果App Store、小米应用商店:语音交互丝滑如真人 识物秒懂
快科技12月27日消息,理想同学App今日正式上架苹果App Store和小米应用商店,其他安卓应用商店预计将陆续上架
2024-12-27 07:37:00
中国什么时候可以100%用自动驾驶 李想:给我三年的时间!
快科技12月26日消息,今晚,在2024理想AI Talk对话节目中,当主持人问及“什么时候可以100%用自动驾驶”时
2024-12-26 21:07:00