• 我的订阅
  • 头条热搜
本周AI不得了!OpenAI的Sora“模拟世界”、Gemini 1.5“10M上下文”、Mistral的开源新贵同日出现
...质量令人着迷。总结:谷歌可能找到了某种新方法,将长上下文的架构理念与他们的 TPU 计算堆栈相结合,并取得了很好的效果。据 Gemini 长语境的负责人之一Pranav Shyam说,这个想法几个月前才刚刚萌芽。如果以小版本(v1.5)而...……更多
...致训练成本飙升。“简单来说,就像做阅读理解时忽视了上下文的语义关系,导致生成图像中经常出现偏差需要反复修正,大幅增加了训练成本。”程明明说。如何降低训练成本、提高训练效率?研究团队在扩散训练过程中引入...……更多
GPT-4劲敌,谷歌进入高能+高产模式
...内的大模型而言,只有Minimax采用了MoE架构。二、扩容的上下文窗口意味着什么?虽然Gemini 1.5 Pro是 Gemini 1.5 系列的初代版本,但初代便表现不俗。扩大上下文窗口后的高水平性能是Gemini 1.5 Pro的一大亮点。多模态大模型卷到今日...……更多
英国ai初创公司wayve公布gaia-1最新进展
...个共享的表示形式,进而在模型中实现统一的时序对齐和上下文理解,这种编码方法,让模型能够更好地整合和理解不同类型的输入。▲图源Wayve而GAIA-1的核心,是一个自回归Transformer,能够预测序列中下一组图像token,世界模型...……更多
Kimi引爆人工智能新风口,龙头连续20CM涨停!哪些公司可
...宣布,公司旗下的kimi智能助手,已支持200万字超长无损上下文,并已开启产品内测。继昨日爆发后,kimi概念股今天(3月21日)继续上涨。其中,龙头股华策影视(300133.SZ)再次涨停,连续收获两个20CM涨停,捷成股份(300182.SZ)...……更多
...流趋势。“Sora能够生成60秒时长的视频说明它的技术对于上下文的信息理解是非常优秀的,比如在视频场景的变换下能够识别同一主体,又如能够理解带有情感倾向的文字并通过画面表现出来。”他认为,“拟人化”和“理解世...……更多
...方不断加码。Gemini1.5 Pro基于大语言模型处理视频模态,上下文长度超过百万, Sora在技术上采用了Diffusion Transformer的路线,OpenAI表示Sora在训练过程中表现出了与其他模型不同的涌现能力,有望成为真正的“世界模型”。从投资...……更多
林达华谈大模型发展之路:未来会有更高效的模型结构出现
大模型的上下文长度快速增长,超长上下文解锁新应用,但推理计算代价高昂,上下文本身对于信息不会进行压缩,不能直接捕捉其中的深层知识和规律。上海人工智能实验室领军科学家林达华。过去一年,人工智能领域风起...……更多
Sora“超级涌现力”将把AI引向何方
...的最小单元进行有意义的关联组合。比如,在保持连贯的上下文语境中,对若干个单词进行有意义组合,从而连缀成一个会意句子;在保持合理的空间布局下,对众多图像小块进行有意义组合,拼合为一幅精彩图像;在保持一致...……更多
10分钟速成专家,「Kimi智能助手」正式支持200万上下文,对话窗口提升10倍 | 最前线
...正式宣布,旗下的Kimi智能助手,已支持200万字超长无损上下文,并于即日起开启产品内测。Kimi智能助手是月之暗面(Moonshot AI)基于自研千亿参数大模型打造的对话式 AI 助手产品,在2023年10月正式发布。而月之暗面也是国内大...……更多
《红楼梦》里有大量东北方言?实测AI大模型“长文阅读”
...,国内通用人工智能“初创明星”月之暗面宣布在大模型上下文窗口技术上取得新突破,旗下的Kimi智能助手可支持200万字超长无损上下文,并开启产品内测,随即引发市场关注和热议,并一度因过于火爆“宕机”。随后,阿里...……更多
Kimi开启大模型应用元年 券商推荐万兴科技掌阅科技等龙头
...助手近期实现的现象级突破。此前,月之暗面将Kimi的无损上下文长度输入能力从此前的20万字提升到了200万字,应用场景扩展到更大范围。随着Kimi的爆红,多家相关上市公司被广泛关注,并积极回复外界关切。AIGC软件A股上市公司万...……更多
零一万物大模型Yi-34B夺得全球开源评测“双料冠军”,已在阿里云魔搭开源
...代码能力和数学能力专项的继续训练模型。全球最长200K上下文窗口Yi-34B模型将发布全球最长、可支持200K超上下文窗口(contextwindow)版本,可以处理约40万汉字超文本输入。上下文窗口是大模型综合运算能力的金指标之一,对于理...……更多
黄仁勋对话Transformer七作者:很多计算资源被浪费,世界需要更好的模型
...环神经网络模型,Transformer模型能够更准确地捕捉单词的上下文和含义,因而成为了像GPT-4和ChatGPT这样的大语言模型的基础,同时也被应用于非语言领域,包括OpenAI的AI代码生成训练模型Codex、文生视频模型Sora和谷歌DeepMind的蛋白...……更多
王小川公布最新大模型,号称全球最长上下文,是GPT-4的14倍|钛媒体焦点
...模型公司“百川智能”宣布,推出Baichuan2-192K大模型,其上下文窗口长度高达192K,能够处理约35万个汉字。百川智能称,Baichuan2-192K是目前全球最长的上下文窗口,也是目前支持长上下文窗口最优秀大模型Claude2(支持100K上下文窗...……更多
用AI当导演,一个人就能拍电影?
...活跃用户就已成功过亿。它能够通过学习人类语言和理解上下文来实现对话互动,敢于质疑与承认错误。那么,如此强大的AI可以生成一部电影吗?AI创作电影的画面AI在电影方面的应用引发了业内的思考,上海温哥华电影学院电影制...……更多
AI赋能、短剧兴起,影视赛道 “一路生花“
...交互体验。Kimi智能助手的核心特点和功能包括:(1)长上下文处理:Kimi能够处理长达200万字的无损上下文,这意味着它可以理解和记忆大量信息,并在此基础上进行有效的交流和任务处理。(2)能力圈:Kimi的能力圈广泛,包...……更多
四大新功能让生成式AI“如虎添翼”
...本并进行训练,这种训练使聊天机器人能够在对话中结合上下文语境,产生类似人类的文本响应。目前,智能客服聊天机器人集成了这项技术。随着这些机器人在语言翻译、创造性写作、理解上下文并作出有意义反应方面的能力...……更多
Kimi爆火背后:访问量仅次于文心一言和阿里通义,国内外大模型都在卷上下文
...款面向C端的大模型产品。早前,该公司宣布在大模型长上下文窗口技术上取得新的突破,Kimi已支持200万字超长无损上下文,并开启产品内测,该能力在不到半年内提升9倍。市场的火爆,导致Kimi服务器一度瘫痪,无法回复用户...……更多
infini-attention:谷歌大内存机制
谷歌大改Transformer,“无限”长度上下文来了。现在,1B大模型上下文长度可扩展到1M(100万token,大约相当于10部小说),并能完成Passkey检索任务。8B大模型在500K上下文长度的书籍摘要任务中,拿下最新SOTA。这就是谷歌最新提...……更多
Kimi爆火出圈,国产大模型首次超越海外!
2024年3月18日,国产AI大模型Kimi将上下文无损输入长度提升至200万字,成为国内大模型首次在部分能力上超越海外主流产品的里程碑。上下文输入长度的增加能够帮助模型更好学习文本知识,从而更有针对性得与用户互动。在长...……更多
OpenAI史诗级更新!最强大模型炸场,128K上下文、价格暴降2/3
...大方面更新重点值得关注和思考。1、GPT-4 Turbo:支持128k上下文,相当于300页文档,输入价格大降2/3,速率限制翻倍,知识更新到2023年4月,改进指令跟随和JSON Mode,更新多个函数调用能力。这意味着比GPT-4更强、更便宜、开发成...……更多
GTC对话黄仁勋:我眼中的GPU,和别人有很大差别
...不是基于检索的。当然,这个生成过程必须是智能的、与上下文相关的。我相信,未来人们电脑上的几乎每一个像素、每一次交互都将通过生成过程产生,我相信 Sam 也这么认为。希望通过 Blackwell 新一代架构能为生成式 AI 这个...……更多
...项目总成本为2.7亿元。Kimi智能助手宣布支持 200 万字无损上下文36氪获悉,通用人工智能创业公司“月之暗面”(Moonshot AI)宣布在大模型长上下文窗口技术上取得新的突破,Kimi智能助手已支持200万字超长无损上下文,并于即日...……更多
开源社区分水岭:Meta大模型Llama 3发布,参数最高或达4000亿
...ama 3已经开放了80亿(8B)和700亿(70B)两个小参数版本,上下文窗口为8k。Meta表示,通过使用更高质量的训练数据和指令微调,Llama 3比前代Llama 2有了“显著提升”。未来,Meta将推出Llama 3的更大参数版本,其将拥有超过4000亿参...……更多
OpenAI举办“AI春晚”;李开复大模型破纪录 | 图灵周报
...的Baichuan2-192K大模型之后,李开复的Yi系列模型再次刷新上下文窗口长度纪录——参数量达340亿的Yi-34B,可支持200K超长上下文窗口,可处理约40万汉字超长文本输入,是目前全球最长的上下文窗口。目前,零一万物估值超过10亿美...……更多
谷歌pixel8系列手机ai功能入侵
...话与您不想要的电话分开。很快,CallScreen还将为您生成上下文回复建议,快速回应简单电话,例如约定确认,而无需接听电话。」另外,Pixel8Pro的背面还新增了一个温度传感器,可以扫描物体的温度,据称在做饭时,可以用它...……更多
智谱AI新一代基座大模型GLM-4在司南评测中跻身前列,位居国内第一
...性能相比上一代大幅提升,逼近GPT-4。它可以支持更长的上下文,具备更强的多模态能力。同时,它的推理速度更快,支持更高的并发,大大降低推理成本。除此之外,GLM-4大幅提升了智能体能力,GLM-4 All Tools 实现自主根据用户...……更多
黄仁勋万字答问实录:AI的下一个浪潮是什么?
...的而不是基于检索的,但这种生成必须是智能的,必须与上下文相关,等等。我们相信,我知道他也相信这一点,几乎每个人电脑上的每个像素,每次你与计算机互动时,都将由生成式芯片生成。而今天的生成式芯片来自英伟达...……更多
马斯克 xAI 推出 Grok-1.5 大语言模型
...Grok-1.5 大语言模型。Grok-1.5 具有改进的推理能力和 128k 的上下文长度,其中最显著的改进之一是其在编码和数学相关任务中的表现。Grok-1.5 将在未来几天内在 平台上向早期测试人员和现有的 Grok 用户推出。在官方测试中,Grok-1.5...……更多
更多关于科技的资讯:
还在更换山寨电池?不要拿安全开玩笑!
你身边是否有不少人,手机还能用但续航不给力,于是选择更换电池继续使用的?这是一个好的解决方法,但是在更换电池方式上,大家有着不同的选择
2024-08-07 18:52:00
比原厂体验更好的盖世小鸡G8+游戏手柄来了
无论现在触屏交互体验有多方便,对于一些游戏玩家来说,他们依然钟情于游戏手柄的操控操控体验,而这些玩家们可以在已经正式打响的ChinaJoy2024找到一款称手的游戏装备了
2024-08-07 18:52:00
Nothing Phone (2a) Plus手机发布
今天,以颜值出众的网红手机品牌Nothing在海外发布了售价相对更低、定位中端的NothingPhone(2a)Plus手机
2024-08-07 18:53:00
谷歌Pixel 9系列手机渲染图曝光,这配色也太好看了吧!
谷歌,安卓的老父亲,每年也会推出新手机来适配自家的新系统,为了提升安卓系统在大屏设备以及折叠屏上的体验,也是推出了折叠屏手机
2024-08-07 18:53:00
最受Steam玩家欢迎:英伟达计划停产RTX 3060显卡
英伟达的60系显卡一般都是为主流消费者打造,虽然在性能上不能跟旗舰显卡相提并论,不过满足1080P分辨率还是绰绰有余,特别是现在有了像DLSS这样技术的加持
2024-08-07 18:54:00
9月新镜头扎堆发布?佳能与腾龙或都在憋大招
自佳能发布EOSR1和EOSR5MarkII两款全画幅专微相机后,影像市场进入了一段平淡期,不过近期有消息透露,9月份会是一波镜头新品的小高潮
2024-08-07 18:55:00
玩不起胶卷?但你一定买得起胶卷补光灯
在近日铭匠光学TTArtisan推出了一款便携式LED补光灯,它采用135胶卷外观,首发价低至29元,比一卷过期胶卷还便宜
2024-08-07 18:55:00
老铁马上要来了:三星Galaxy S24 FE上线自家网页
三星自从GalaxyNote7整大活后就一直推出FE也就是俗称的“老铁版”,在基本配置几乎保持不变的前提下以更加诱人的价格来吸引消费者前去购买
2024-08-07 18:55:00
新一代理财产品“电子茅台”,华为三折叠手机爆下月发布
市面上已有种种迹象表明,华为将会发布首款三折叠手机,而今天,数码博主@定焦数码疑似爆出,华为三折叠手机大概率会在下个月发布
2024-08-07 18:55:00
戴森OnTrac头戴式降噪耳机登陆中国市场
8月2日,戴森的新款OnTrac头戴式降噪耳机正式登陆亚洲市场,新耳机共有7种耳壳与7种耳罩配色,满足用户个性化的外形需求
2024-08-07 18:55:00
小米是屌丝机?雷军回应,自己倒霉的地方就是老跟苹果、华为比
小米手机早期因为性价比的优势,捕获了不少年轻消费者的芳心,但是也是因为价格便宜,秉持着高性价比的优势,在外观、做工等方面做了一些舍弃
2024-08-07 18:56:00
美光发布行业首款PCIe 6.0 SSD
估计大家还在使用PCIe4.0的SSD,部分发烧级玩家开始尝试PCIe5.0SSD,享受超过10GB/S的速度,不过对于存储厂商来说
2024-08-07 18:56:00
天猫精灵发布“哇哦闺蜜机”:4999元带来4K极致视听体验
天猫精灵相信大家已经十分地熟悉了,它从智能音箱一步步地进化到家庭的娱乐中枢,而现在购买天猫精灵的消费者对于生活品质有着更高的追求
2024-08-07 18:57:00
差旅平台选型参考:差旅预算管理智能化
近年来,大型制造业企业深圳市创世纪机械有限公司(以下简称“创世纪”)在快速发展的过程中,逐渐面临着传统财务管理的诸多挑战和痛点
2024-08-07 19:05:00
玩家热议:你想拥有哪个游戏角色的全部能力?
近日,Reddit用户CaydGaming在平台上发起了一场有趣的讨论,问题直击玩家心声:“如果你可以拥有一个游戏角色的所有能力
2024-08-07 19:10:00