• 我的订阅
  • 头条热搜
mistralai公司推出mixtral8x22b开源模型
...出了Mixtral8x22B开源模型,共有1760亿个参数,Context长度(上下文文本)为6.5万个token,可以通过Torrent下载。MistralAI公司自成立以来一直备受外界关注,“6人团队,7页PPT,8亿融资”不断缔造传奇,而且在得到微软的投资之后更是...……更多
英国ai初创公司wayve公布gaia-1最新进展
...个共享的表示形式,进而在模型中实现统一的时序对齐和上下文理解,这种编码方法,让模型能够更好地整合和理解不同类型的输入。▲图源Wayve而GAIA-1的核心,是一个自回归Transformer,能够预测序列中下一组图像token,世界模型...……更多
开源社区分水岭:Meta大模型Llama 3发布,参数最高或达4000亿
...ama 3已经开放了80亿(8B)和700亿(70B)两个小参数版本,上下文窗口为8k。Meta表示,通过使用更高质量的训练数据和指令微调,Llama 3比前代Llama 2有了“显著提升”。未来,Meta将推出Llama 3的更大参数版本,其将拥有超过4000亿参...……更多
李开复AI公司首发大模型,阿里云领投 | 36氪独家
...言模型)和中文大模型榜单C-Eval排行榜已经爬升到1位。上下文窗口,意味着模型的“记忆力”。据介绍,Yi目前拥有200K上下文窗口,可处理约40万字的文本——这也是目前全球大模型中最长的上下文窗口。李开复提到,由于GPU紧...……更多
10分钟速成专家,「Kimi智能助手」正式支持200万上下文,对话窗口提升10倍 | 最前线
...正式宣布,旗下的Kimi智能助手,已支持200万字超长无损上下文,并于即日起开启产品内测。Kimi智能助手是月之暗面(Moonshot AI)基于自研千亿参数大模型打造的对话式 AI 助手产品,在2023年10月正式发布。而月之暗面也是国内大...……更多
infini-attention:谷歌大内存机制
谷歌大改Transformer,“无限”长度上下文来了。现在,1B大模型上下文长度可扩展到1M(100万token,大约相当于10部小说),并能完成Passkey检索任务。8B大模型在500K上下文长度的书籍摘要任务中,拿下最新SOTA。这就是谷歌最新提...……更多
马斯克打脸OpenAI!全球最大模型Grok-1开源
...antization) 最大序列长度为8,192个数据单元,以处理更长的上下文信息纽约时报点评道,开源Gork背后的原始代码,是这个世界上最富有的人控制AI未来战斗的升级。Meta CEO扎克伯格刚刚也对Grok做出了评价:“并没有给人留下真正深...……更多
李彦宏称开源赶不上闭源?Meta发布最强开源模型,马斯克评价“还不错”
...备全新功能的模型,包括多模态、支持多语言对话、扩展上下文窗口的长度,以及全面提升的综合性能。 基于Llama 3,Meta发布了AI助手 Meta AI。扎克伯格表示,MetaAI将成为人们可以免费使用的最智能的AI助手。开源还是闭源?Llama...……更多
Kimi爆火背后:访问量仅次于文心一言和阿里通义,国内外大模型都在卷上下文
...款面向C端的大模型产品。早前,该公司宣布在大模型长上下文窗口技术上取得新的突破,Kimi已支持200万字超长无损上下文,并开启产品内测,该能力在不到半年内提升9倍。市场的火爆,导致Kimi服务器一度瘫痪,无法回复用户...……更多
Kimi概念股继续暴涨!多家上市公司回应,月之暗面致歉系...
...。 此前3月18日,月之暗面宣布其AI产品Kimi,在大模型长上下文窗口技术上取得新的突破,Kimi智能助手已支持200万字超长无损上下文,并于即日起开启产品内测。据了解,月之暗面成立于2023年4月,法定代表人杨植麟毕业于清华...……更多
中国银河维持传媒互联网推荐评级,AI技术潜在的应用行业将受益
...面科技有限公司开发的KimiChat宣布已支持200万字超长无损上下文输入,并已开启产品内测。据SimilarWeb,目前KimiChat的周度访问量已经超过200万。2024年3月23日,阶跃星辰在全球开发者先锋大会现场发布了其Step系列通用大模型,其...……更多
估值180亿美元,马斯克造了一家“AI独角兽”
...。在Grok-1开源后不久,xAI就紧接着退出了Grok-1.5,主打长上下文理解和先进的推理能力,其上下文长度从原先的8192增长至128K,与GPT-4持平。新模型在数学能力上的提升达到了惊人的50%,在HumanEval数据集上的得分甚至超过了GPT-4。...……更多
林达华谈大模型发展之路:未来会有更高效的模型结构出现
大模型的上下文长度快速增长,超长上下文解锁新应用,但推理计算代价高昂,上下文本身对于信息不会进行压缩,不能直接捕捉其中的深层知识和规律。上海人工智能实验室领军科学家林达华。过去一年,人工智能领域风起...……更多
GPT-4劲敌,谷歌进入高能+高产模式
...内的大模型而言,只有Minimax采用了MoE架构。二、扩容的上下文窗口意味着什么?虽然Gemini 1.5 Pro是 Gemini 1.5 系列的初代版本,但初代便表现不俗。扩大上下文窗口后的高水平性能是Gemini 1.5 Pro的一大亮点。多模态大模型卷到今日...……更多
李开复回应旗下AI独角兽陷“套壳”争议:起步受益于开源,会进步
...刚刚正式发布首款开源中英双语大模型Yi-34B,其拥有200K上下文窗口,可处理约40万字的文本。模型开放商用申请,在阿里云魔搭社区首发。与此同时,零一万物已完成新一轮融资,由阿里云领投。据零一万物介绍,截至11月5日,...……更多
让大模型“外挂硬盘”,百川智能发布新API系列,企业定制成本大大降低
...,大模型是新时代的计算机,就如同中央处理器一样;而上下文窗口可以看做计算机的内存,存储了当下正在处理的文本。互联网实时信息与企业完整知识库,则共同构成大模型时代的硬盘。而基于搜索增强技术推出的API系列,...……更多
库克现身上海首次谈及AI话题,苹果真急了
...一篇论文,公开了一个名为“MM1”的多模态模型,其具有上下文学习、图片识别和一定连续推理的能力。该模型具有三个参数规模,其中最大的拥有300亿参数。作为对比,OpenAI的GPT-4拥有1.7万亿参数规模。而几周前发布的新款Mac...……更多
马斯克承诺开源版大模型 来了!Grok-1:3140亿参数迄今最大,权重架构全开放
...2 个。 旋转位置嵌入大小为 6144,与输入嵌入大小相同。上下文长度为 8192 tokens,精度为 bf16。此外还提供了一些权重的 8bit 量化内容。当然,我们还是希望 xAI 官方能够尽快公布 Grok-1 的更多模型细节。Grok-1 是个什么模型?能...……更多
OpenAI举办“AI春晚”;李开复大模型破纪录 | 图灵周报
...的Baichuan2-192K大模型之后,李开复的Yi系列模型再次刷新上下文窗口长度纪录——参数量达340亿的Yi-34B,可支持200K超长上下文窗口,可处理约40万汉字超长文本输入,是目前全球最长的上下文窗口。目前,零一万物估值超过10亿美...……更多
零一万物大模型Yi-34B夺得全球开源评测“双料冠军”,已在阿里云魔搭开源
...代码能力和数学能力专项的继续训练模型。全球最长200K上下文窗口Yi-34B模型将发布全球最长、可支持200K超上下文窗口(contextwindow)版本,可以处理约40万汉字超文本输入。上下文窗口是大模型综合运算能力的金指标之一,对于理...……更多
...一个基础设施的东西,来支撑上面的智能服务。大模型对上下文的理解,对情景的理解都更深了,不管它在手机上还是其他设备上,都能够随时随地了解你所在的场景,给用户提供下一步的可能性。小米的优势是多设备场景的综...……更多
智谱AI发布基座大模型GLM-4,发起大模型开源基金
...开放日上,智谱AI发布新一代基座大模型GLM-4,支持128K的上下文窗口长度,单次提示词能处理的文本可达300页,文生图和多模态理解得到增强,支持处理Excel、PDF、PPT等格式的文件,可自动调用代码解释器进行复杂的方程或微积...……更多
王小川公布最新大模型,号称全球最长上下文,是GPT-4的14倍|钛媒体焦点
...模型公司“百川智能”宣布,推出Baichuan2-192K大模型,其上下文窗口长度高达192K,能够处理约35万个汉字。百川智能称,Baichuan2-192K是目前全球最长的上下文窗口,也是目前支持长上下文窗口最优秀大模型Claude2(支持100K上下文窗...……更多
...效捕捉局部信息和短依赖信息,使模型能够更精准地掌握上下文之间的强语义关联,学习人类语言习惯范式本质,大幅提升数理逻辑、数学计算、代码生成能力。浪潮信息于2021年9月在业界率先推出了中文人工智能(AI)巨量模...……更多
智谱AI新一代基座大模型GLM-4在司南评测中跻身前列,位居国内第一
...性能相比上一代大幅提升,逼近GPT-4。它可以支持更长的上下文,具备更强的多模态能力。同时,它的推理速度更快,支持更高的并发,大大降低推理成本。除此之外,GLM-4大幅提升了智能体能力,GLM-4 All Tools 实现自主根据用户...……更多
谷歌DeepMind推Imagen2;ChatGPT Plus恢复订阅;OpenAI提出用小模型监督大模型 | 本周硅谷发生了什么?
...与GPT-3.5相媲美,甚至优于GPT-3.5。Mixtral可以处理32k长度的上下文,支持英语、法语、意大利语、德语和西班牙语,具有强大的代码生成能力。具体来说,Mixtral拥有467亿总参数,但每个令牌只使用129亿个参数。因此,它处理输入...……更多
Sora“超级涌现力”将把AI引向何方
...的最小单元进行有意义的关联组合。比如,在保持连贯的上下文语境中,对若干个单词进行有意义组合,从而连缀成一个会意句子;在保持合理的空间布局下,对众多图像小块进行有意义组合,拼合为一幅精彩图像;在保持一致...……更多
...继续提出“把万里长城变成雪景”指令时,华藏可以根据上下文语境,对图片进行相应指令的修改——万里长城瞬间平添皑皑雪景。这种“文修图”能力是华藏自研技术之一,使用了数百亿的数据进行模型训练而成。包括文修图...……更多
科学家提出情景学习新范式,让学霸大模型向学弱大模型输送能力
...可生成几个示例样本,以此作为提示下游模型完成任务的上下文学习示例,从而大幅增强下游模型的性能表现。假如这些后续研究能够顺利完成,将能更大程度地提升小模型的能力,从而为产业化落地提供更多支持。参考资料:...……更多
Kimi引爆人工智能新风口,龙头连续20CM涨停!哪些公司可
...宣布,公司旗下的kimi智能助手,已支持200万字超长无损上下文,并已开启产品内测。继昨日爆发后,kimi概念股今天(3月21日)继续上涨。其中,龙头股华策影视(300133.SZ)再次涨停,连续收获两个20CM涨停,捷成股份(300182.SZ)...……更多
更多关于科技的资讯:
《使命召唤20:现代战争3》宣布加入XGP 所有模式皆可游玩
今日,微软正式宣布《使命召唤20:现代战争3》将在7月24日(北京时间7月25日凌晨1点)加入Xbox Game Pass(主机端/PC端)
2024-07-24 19:56:00
国内首个双平台工业化造楼机投入使用:最快3天盖好一层楼
快科技7月24日消息,据国内媒体报道称,国内首个双平台工业化造楼机正式投入使用,最快3天可以盖好一层楼。据官方介绍,该造楼机由上
2024-07-24 20:26:00
曝小米招聘SU7无人车测试安全员:月薪6000元起步
快科技7月24日消息,据凤凰网科技报道,近日网传一名佩信集团工作人员正在招聘小米su7智驾测试司机。据了解,该工作岗位负责操作测试车
2024-07-24 20:26:00
IGN曾痛批质疑弥助的人 结果育碧道歉后自己也改口了
在之前的《刺客信条:影》报道中,政治正确先锋IGN一直将弥助称为“历史上真实存在的黑武士”。而在昨日育碧发布“道歉”声明后
2024-07-24 20:26:00
下代龙芯3B6600性能媲美中高端12/13代酷睿:能跑Windows系统和应用
龙芯3A6000处理器已经达到了Intel 10代酷睿i3的水平,而接下来的龙芯3B6600将再次跨越一个大的台阶,可以媲美中高端的12/13代酷睿
2024-07-24 20:26:00
过去一年抖音电商达人带货总销售额同比增长43%
7月24日,抖音电商“寻找同行者”在北京举办“新收入·新消费”主题分享会,邀请创作者代表、专家学者和媒体到场,共同探讨直播电商带来的创业新机会和消费新场景
2024-07-24 20:56:00
海控免税持续探索“免税+”合作新生态 助力离岛免税持续火热
南海网7月24日消息(记者 王子遥 通讯员 胥圣兰)随着暑期旅游旺季的来临,海南迎来了离岛免税购物的新一波热潮,海控全球精品免税城(以下简称“海控免税”)凭借其独特的“免税+”异业合作新生态
2024-07-24 20:56:00
创纪录!小米通讯公开发行10亿元债券 获5.4倍超额认购
快科技7月24日消息,小米集团副总裁,首席财务官林世伟宣布了小米创造的一个新记录。昨日,小米通讯成功公开发行科技创新+高成长产业公司债券
2024-07-24 20:56:00
数字织梦 95后“小师傅”为车间“减负”
本文转自:人民网-云南频道新时代产业工人正能量报道数字织梦 95后“小师傅”为车间“减负”尹馨红云红河烟草(集团)有限责任公司曲靖卷烟厂的卷包车间里机器轰鸣
2024-07-24 21:02:00
蚂蚁保“金选”上线热门保险对比功能,选品标准进一步提升
7月24日,互联网保险代理平台“蚂蚁保”再次升级了旗下“金选”保险服务,上线全网热门保险对比功能,方便用户做决策参考。这意味着
2024-07-24 21:08:00
中新经纬7月24日电 题:直销银行退潮,“大而全”模式或难走通作者 薛洪言 星图金融研究院副院长近日,多家银行发布公告
2024-07-24 21:09:00
高温天激发清凉降温需求 京东冰丝凉席成交额同比增长115%
随着欧洲开启高温炙烤模式,中国凉席在法国巴黎走红,遭到疯抢,网友戏称“就连凉席也去巴黎参加奥运了”。与此同时,国内也已进入三伏天
2024-07-24 21:09:00
奥的斯全球下调2024财年业绩预期
文 | 李振兴7月24日,奥的斯全球下调了全年净销售额预期,预计2024财年净销售额为143亿至145亿美元,低于市场预计的146
2024-07-24 21:15:00
雷军没想到小米随身拍能卖断货:399元取代拍立得
快科技7月24日消息,近日,小米新品发布会之后,自带小米照片打印机1S的随身拍套装却意外爆火,让雷军都没想到。在日前的直播中
2024-07-24 21:56:00
手机有多脏?研究称手机携带的细菌足以致病
在近日的一项研究中,研究人员在研究的6300万部手机中,发现有1470万部手机存在健康威胁。手机上存在大量的细菌,平均一部手机携带的细菌量是男厕冲水柄细菌含量的18倍
2024-07-24 21:56:00