• 我的订阅
  • 财经

微软被曝正自研AI大模型:5000亿个参数,与谷歌和OpenAI竞争

类别:财经 发布时间:2024-05-07 14:33:00 来源:澎湃新闻

微软被曝正自研AI大模型:5000亿个参数,与谷歌和OpenAI竞争

科技巨头微软或正在研发参数达5000亿的全新AI(人工智能)大模型,将正面叫板谷歌和OpenAI。

当地时间5月6日,据外媒报道,微软正在研发一款名为MAI-1的最新AI大模型,其规模远超出微软此前推出的一些开源模型,在性能上或能与谷歌的Gemini 1.5、Anthropic的Claude 3和OpenAI的GPT-4等知名大模型相匹敌。微软或将在5月21日开始举办的Build开发者大会上演示这款新模型。

据报道,MAI-1的开发由前谷歌AI领导人、曾担任AI初创公司Inflection首席执行官的穆斯塔法·苏莱曼(Mustafa Suleyman)领导。就在今年3月,刚刚领投完Infection的最新一轮融资,微软便从Infection挖走了包括苏莱曼在内的两位联合创始人以及部分员工。有知情人士透露,微软为此向Infection支付了超过6.5亿美元。

尽管MAI-1可能借鉴了Inflection旗下模型的部分技术,有微软员工表示,MAI-1是一款全新的大语言模型,拥有约5000亿个参数,远超微软此前训练的任何开源模型。不到一个月前,微软刚推出了一款名为Phi-3的小型AI模型,其中Phi-3 mini被优化至可部署在手机上,拥有38亿参数,经过3.3万亿token的训练,微软称其性能与GPT-3.5等模型相当。

相比之下,MAI-1的规模要大得多,也需要更多的算力投入和训练数据。为了训练该模型,微软已经配置了大量包含英伟达GPU的服务器集群,并从各类来源收集训练数据,包括由OpenAI的GPT-4生成的文本和公共互联网数据。这或将使MAI-1与OpenAI的GPT-4处于相似的水平,据传后者拥有超过1万亿个参数。

Phi系列模型和MAI-1的研发体现出微软或在AI领域采取了双重策略,一边为移动设备开发小型本地模型,一边开发由云端支持的更大规模的模型。不过,即使在微软内部,MAI-1的确切用途也尚未得到确认。

更重要的是,MAI-1体现出微软并不希望在AI领域完全依附于合作伙伴OpenAI的技术。来自OpenAI的技术正在驱动微软的各类生成式AI功能,包括集成在Windows中的聊天机器人。此前,有来自微软AI平台团队的员工抱怨称,公司的AI战略过于关注与OpenAI的合作关系,使得微软对AI原创研究的预算减少。

6日当天,微软首席技术官凯文·斯科特(Kevin Scott)在领英上发帖,间接回应了关于MAI-1的报道。他表示,OpenAI使用微软构建的超级计算机来训练AI模型,而微软的研究部门和产品团队也在构建AI模型:“AI模型几乎出现在我们的每一项产品、服务和运营流程中,制作和运营它们的团队有时需要做一些自定义工作,无论是从头开始训练一个模型,还是微调别人构建的模型。未来将会有更多这样的情况,其中一些模型的名字包括图灵(Turing)和MAI。”

为了实现在AI方面的突破,微软也在大力囤积算力资源。4月初,有报道称微软计划到今年年底前囤积180万块AI芯片,意味着公司希望在2024年内将所持有的GPU数量增加两倍。据知情人士透露,从2024财年到2027财年(到2027年6月30日结束),微软预计将在GPU和数据中心上花费约1000亿美元。

以上内容为资讯信息快照,由td.fyun.cc爬虫进行采集并收录,本站未对信息做任何修改,信息内容不代表本站立场。

快照生成时间:2024-05-07 18:45:04

本站信息快照查询为非营利公共服务,如有侵权请联系我们进行删除。

信息原文地址:

据悉,OpenAI正在开发一款新的开源模型,以对抗微软和Meta合作开发的开源模型Llama2。这款新模型的内部代号为“G3PO”
2023-07-27 18:38:00
钮祜禄·Meta:发布最强开源新模型Llama 2,拉拢微软做盟友 | 最前线
...究用途,如今的Llama 2会催生新一波的AI大模型创业热潮。微软表示,Llama 2已经针对 Windows进行优化
2023-07-19 18:04:00
微软发布phi-1.5全新预训语言模型
9月12日消息,微软研究院昨日发布了名为phi-1.5的全新预训练语言模型,共有13亿个参数,适用于QA问答、聊天格式和代码等等场景
2023-09-13 04:52:00
微软打造 13 亿参数小型 LLM AI 模型
...积实际上效果并不见得更好,更多要看训练数据的质量,微软日前最近发布了一款13亿参数的语言模型phi-1,采用“教科书等级”的高品质资料集训练而成
2023-06-27 22:27:00
Pika爆火,但AI视频还没到「GPT时刻」;首个GPT-4驱动的人形机器人;微软小模型击败大模型丨AI新零售早报
...转换为机器人动作。(来源:“量子位”微信公众号)《微软小模型击败大模型:27亿参数,手机就能跑》微软发布了一个仅有27亿参数的小型模型Phi-2,它在多数常识推理、语言理解、
2023-12-14 09:34:00
微软连发3款Phi-3.5模型:128K上下文,首用MoE架构,部分性能超GPT-4o mini
智东西8月21日消息,今天,微软一口气甩出3款超强轻量级模型!微软本次发布的轻量级模型系列名为Phi-3.5,适合在内存和算力受限的环境中运行
2024-08-22 09:49:00
微软发布旗下最小语言模型phi-2
11月17日消息,微软Ignite2023大会已拉开帷幕,微软在本次活动中发布了旗下最小的语言模型Phi-2,共有27亿参数
2023-11-17 14:00:00
微软推出14b参数“最先进”小型语言模型
12月13日消息,微软今天宣布推出14B参数“最先进”小型语言模型(SLM)Phi-4,除了传统的语言处理外,它还擅长数学等领域的复杂推理
2024-12-14 00:08:00
微软:从“软件老大”到“AI帝国”
从2009开始开发AI模型,到2019年投资OpenAI,微软正在一步一步成为AI时代的庞然大物。对于微软及其生态系统而言
2023-11-21 10:45:00
更多关于财经的资讯:
中国人民保险集团传达学习党的二十届四中全会精神
10月24日,中国人民保险集团党委召开会议,传达学习党的二十届四中全会精神。10月27日,中国人民保险集团党委召开扩大会议
2025-10-28 11:39:00
邮储银行夏邑县支行精准助力秋粮抢收
大河网讯 “连续阴雨差点误了农时,多亏邮储银行的100万贷款及时到账,新烘干塔立马投用,这上万斤粮食才算保住了!”站在轰鸣运转的烘干塔旁
2025-10-28 11:59:00
浙江建德农商行因贷款管理违规被罚240万元 6名责任人遭警告
10月27日,国家金融监督管理总局浙江监管局行政处罚信息公开表显示,浙江建德农村商业银行股份有限公司及相关责任人因个人贷款管理不审慎;固定资产贷款管理不尽职等被罚款240万元;对
2025-10-28 12:28:00
大家人寿浙江分公司因提供虚假报告被罚25万 两责任人合计罚5万
10月27日,国家金融监督管理总局浙江监管局行政处罚信息公开表显示,大家人寿保险股份有限公司浙江分公司及相关责任人因编制或者提供虚假的报告、报表、文件、资料被罚款25万元;杨某被
2025-10-28 12:29:00
泰康人寿舟山支公司因涉销售学历审核缺位与收益夸大被警告并罚款15.5万元
10月28日,泰康人寿保险有限责任公司浙江舟山中心支公司及相关责任人因未严格审核销售人员学历证书、夸大保险产品收益被警告并罚款15.5万元;童某被警告并罚款0.5万元;沈某善被警
2025-10-28 12:29:00
“牵手”成功!潍宿高铁至青岛连接线青墩扶淇河特大桥128米连续梁中跨合龙
10月26日凌晨,随着最后一方混凝土浇筑完成,由中建股份和中建七局联合体承建的潍宿高铁至青岛连接线站前施工三标青墩扶淇河特大桥128米连续梁中跨提前“牵头”成功
2025-10-28 12:51:00
上海市委书记陈吉宁、上海市市长龚正检查第八届进博会服务保障和办展办会工作
第八届中国国际进口博览会筹备工作进入“临门一脚”冲刺阶段。10月27日下午,市委书记、进博会城市服务保障领导小组组长陈吉宁
2025-10-28 13:17:00
TCL科技等新设超高清视频显示产业私募创投基金,出资额20亿
近日,深圳市九天智城超高清视频显示产业私募创业投资基金合伙企业(有限合伙)成立,出资额20亿元,经营范围包含:以私募基金从事股权投资
2025-10-28 13:48:00
小米汽车新专利可用于制造体积能量密度更高的电池产品
近日,小米汽车科技有限公司申请的“磷酸铁锂材料及其制备方法、锂离子电池”专利公布。企查查专利摘要显示,本公开采用含有金属掺杂元素的羟基磷酸铁和含有金属掺杂元素的磷酸铁作为磷铁源
2025-10-28 13:48:00
河南神火高质量产业投资发展合伙企业成立
近日,河南神火高质量产业投资发展合伙企业(有限合伙)成立,出资额15.12亿元,经营范围包含:以私募基金从事股权投资、投资管理
2025-10-28 14:00:00
中国中铁等成立林场建设运营公司,含人工造林业务
近日,山阳县双储林场建设运营有限责任公司成立,法定代表人为成志勇,注册资本为2000万元,经营范围包含:花卉种植;森林改培
2025-10-28 14:00:00
茅台金石基金旗下企业入股MicroLED微显示公司JBD
近日,上海显耀显示科技有限公司发生工商变更,注册资本增加到6644.80万元,新增茅台金石基金旗下金石显耀(嘉兴)企业管理合伙企业(有限合伙)
2025-10-28 14:00:00
义乌市上商智能制造公司注册成立
近日,义乌市上商智能制造有限公司成立,法定代表人为毛凌峰,注册资本为5000万元,经营范围包含:通用设备制造(不含特种设备制造)
2025-10-28 14:00:00
保利发展新设住房租赁公司,注册资本5000万
近日,龙岩保润和院住房租赁有限公司成立,法定代表人为薛帅,注册资本为5000万元,经营范围包含:非居住房地产租赁;住房租赁;土地使用权租赁;柜台、摊位出租。企查查股权穿透显示,该
2025-10-28 14:00:00
农业银行优先股一期股息方案落地11月5日发放,每股派4.12元(含税)
10月27日,中国农业银行(证券代码:601288)发布优先股一期(优先股代码:360001,简称“农行优1”)2024-2025年度股息发放实施公告
2025-10-28 12:32:00