- 我的订阅
- 头条热搜
我们正处于一个信息大暴发的时代，每天都能产生数以百万计的新闻资讯！
虽然有大数据推荐，但面对海量数据，通过我们的调研发现，在一个小时的时间里，您通常无法真正有效地获取您感兴趣的资讯！
头条新闻资讯订阅，旨在帮助您收集感兴趣的资讯内容，并且在第一时间通知到您。可以有效节约您获取资讯的时间，避免错过一些关键信息。
文 | 苏建勋Transformer是当下爆火的GPT、LLAMA、PaLM等大模型普遍采用的基础架构，凭借强大的自然语言理解能力，Transformer在问世的短短几年内便取代了传统的RNN网络结构，成为自然语言处理领域的主流模型架构。如今，一家创业...……更多
2024-01-29 06:31:00模型,机制,公司,模型,架构,岩芯
...等互联网科技巨头不断涌入，纷纷对标GPT-4升级 AI 通用大模型。而在To B企业端领域，中小大模型领域当前面临头部企业加速融资、市场“内卷”竞争等复杂局面。如今，一家成立仅四个多月的生成式 AI（AIGC，人工智能创造内容...……更多
2023-11-01 11:02:00岩芯,杀出重围,重围,对话,大战,玩家
...芯数智人工智能科技有限公司(以下简称RockAI)的Yan架构大模型成功通过《生成式人工智能服务管理暂行办法》备案,这是国内首个非Transformer架构大模型通过备案。Yan模型简介Yan架构大模型是国内首个非Transformer架构、非Attention机...……更多
2024-12-04 16:32:00架构,模型,模型,架构,机制,智能
作为人工智能领域的技术新高地，大模型正以前所未有的速度赋能各行各业。通过其在各领域的广泛应用，可以实现更高效、更智能的服务和决策过程，推动产业持续创新和发展。12月28日，数字中国大模型论坛在上海召开，围...……更多
2023-12-29 15:22:00百业,模型,企业,模型,智能,数字
...经营管理能力。中台构建两大核心能力，聚焦大数据、大模型两大能力建设，支持前端智能化应用创新突破；后台建立统一、高效、安全、稳定的新架构，提升系统架构的先进性、实现共建共享，提升科技效能。最后，做好机制...……更多
2023-11-20 23:09:00混合,模型,领先,体系,目标,阳光
2月18日，在大洋彼岸的马斯克秀出最新大模型Grok 3当天，国产AI公司深度求索（DeepSeek）最新一篇论文引发关注，创始人梁文锋在署名之列，并2月16日提交到预印本平台arxiv。这篇论文的核心关于NSA(Natively Sparse Attention，原生稀疏...……更多
2025-02-19 18:43:00文锋,对大,注意力,模型,意味,机制
...查技术方法组合，基于地质找矿理论，结合“大数据—大模型—大算力”的成矿预测模型，坚持就矿找矿，在深、边部实现突破，取得了系列成果。“按照计划，公司预计2026年进入矿山基建期，2027年可以实现每年开采50万吨矿...……更多
2025-04-21 22:15:00哈密,金矿,哈密,哈密市,金矿,勘探
...，三峡大学校长王炎廷向校友代表赠送了水电基石3D打印模型。该模型由水利与环境学院3D打印与智能建造团队牵头设计制作，是对水电基石广场的等比例微缩景观呈现，寄寓着母校的牵挂和期盼，意在为校友留下母校的记忆珍...……更多
2023-10-06 14:46:00三峡大学,三峡,地标,大学,三峡,三峡大学
...和诋毁的声音，比如让他们拿出证据，证明他们自研的大模型架构RWKV6确实比OpenAI强。但彭博完全不在意这些声音，或许这就是成为另类的代价。——在诸多大模型公司都选择与OpenAI相同的Transformer架构时，彭博用了三年时间走...……更多
2024-10-14 13:40:00之路,模型,抄袭,主流,罗璇,架构
...月19日在Arxiv上分享了Stable Audio Open的研究论文，公开了该模型背后的技术细节。Stable Audio Open是StabilityAI于今年6月推出的开源文本转音频模型，可免费生成长达47秒的样本和音效，还可生成44.1kHz高质量立体声音频，并且能在消费...……更多
2024-07-25 09:22:00最新技术,火爆,模型,细节,音频,全球
...：林志佳马斯克（Elon Musk）真的实现了他的承诺——把大模型Grok-1开源了。钛媒体App获悉，北京时间3月18日早上，“硅谷钢铁侠”、亿万富翁马斯克旗下AI初创公司xAI宣布，其研发的大模型Grok-1正式对外开源开放，用户可直接通...……更多
2024-03-20 13:44:00马斯,马斯克,模型,全球,马斯,马斯克
全球开源前二，来自中国大模型的Aha时刻。如果一个技术用3年时间，从默默无闻到改变世界，我们称其为第N次工业革命；如果这个技术从论文到落地的过程中，头部玩家如走马灯更迭，百亿流量砸下去只听一声响就陷入沉寂，...……更多
2025-07-02 13:31:00一群,进化论,偏执,进化,模型,技术
【新智元导读】TII开源全球第一个通用的大型Mamba架构模型Falcon Mamba 7B，性能与Transformer架构模型相媲美，在多个基准测试上的均分超过了Llama 3.1 8B和Mistral 7B。今天，阿布扎比支持的技术创新研究所(TII) 开源了全球第一个通用的...……更多
2024-08-14 09:43:00一鸣,霸主,模型,再次,模型,序列
Mamba 架构的大模型又一次向 Transformer 发起了挑战。Mamba 架构模型这次终于要「站」起来了？自 2023 年 12 月首次推出以来，Mamba 便成为了 Transformer 的强有力竞争对手。此后，采用 Mamba 架构的模型不断出现，比如 Mistral 发布的首...……更多
2024-08-14 09:39:00力大,架构,模型,模型,架构,训练
2024年，全球主流企业加快推出MoE大模型，1-5月发布千亿以上大模型均采用MoE优化架构，且数量超过近三年总和。MoE大模型架构凭借平衡大模型训推成本和计算效率等优势，更适合处理大规模数据和复杂任务，已成谷歌、OpenAI、...……更多
2024-11-04 16:00:00研究方向,模型,现状,方向,趋势,研究
【新智元导读】Scaling Law还没走到尽头，「小模型」逐渐成为科技巨头们的追赶趋势。Meta最近发布的MobileLLM系列，规模甚至降低到了1B以下，两个版本分别只有125M和350M参数，但却实现了比更大规模模型更优的性能。从5月和6月...……更多
2024-07-23 09:39:00模型,性能,移动,模型,参数,架构
【新智元导读】前谷歌科学家Yi Tay重磅推出「LLM时代的模型架构」系列博客，首篇博文的话题关于：基于encoder-only架构的BERT是如何被基于encoder-decoder架构的T5所取代的，分析了BERT灭绝的始末以及不同架构模型的优缺点，以史为...……更多
2024-07-22 09:39:00科学家,江湖,科学,博客,模型,目标
技术：大模型发展呈现“规模定律”，Transformer为技术基座1.1 大模型“大力出奇迹”的背后：Scaling Law大规模语言模型（Large Language Models，LLM）泛指具有超大规模参数或者经过超大规模数据训练所得到的语言模型。与传统语言模...……更多
2024-10-21 10:03:00模型,行业报告,新纪元,报告,发展,行业
...凌晨，OpenAI再次扔出一枚深水炸弹，发布了首个文生视频模型Sora。据介绍，Sora可以直接输出长达60秒的视频，并且包含高度细致的背景、复杂的多角度镜头，以及富有情感的多个角色。目前官网上已经更新了48个视频demo，在这...……更多
2024-02-16 18:44:00文生,奥尔,奥尔特曼,特曼,模型,提示
...方法及架构，本发明通过构建基于朴素贝叶斯算法的填补模型，实现了对能源管理系统中数据缺失段的智能预测与填补，提高了数据完整性和连续性。系统首先通过滑动窗口机制动态管理历史数据与新数据，确保模型在填补过程...……更多
2025-01-30 20:29:00时间序列,数据,连续性,序列,架构,完整性
...击造成系统性错误，实现交易策略的“抗干扰设计”。AI模型矩阵架构：多模型协同演化，实时在线更新Indira的核心在于其多模型协同演化系统，包括深度学习（如LSTM、Transformer）、集成算法（GBM、SVM、随机森林）和强化学习（D...……更多
2025-04-20 20:01:00矩阵,进化,背后,驱动,战略,服务器
【新智元导读】o1大火背后，最关键的技术是CoT。模型通过一步一步推理，恰恰是「慢思考」的核心要义。而这一观点，其实这家国内大厂早就率先实现了。OpenAI的理念，居然被国内公司抢先践行了？比起OpenAI，这家公司的idea...……更多
2024-09-21 09:50:00周鸿,前瞻,应用,模型,推理,协作
2023年，是人工智能大模型快速发展的一年。伴随ChatGPT的横空出世，各行各业的生产力似乎都将被AI大模型再次点燃。国产大模型的数量快速增长，截至10月，国内已发布238个大模型。尽管围绕AI大模型技术变革之力的讨论层出不...……更多
2023-11-19 12:55:00文心,百业,进化,模型,模型,文心
...歌大改Transformer，“无限”长度上下文来了。现在，1B大模型上下文长度可扩展到1M（100万token，大约相当于10部小说），并能完成Passkey检索任务。8B大模型在500K上下文长度的书籍摘要任务中，拿下最新SOTA。这就是谷歌最新提出的...……更多
2024-04-14 02:57:00大内,机制,上下文,模型,处理,上下
元象XVERSE发布中国最大MoE开源模型：XVERSE-MoE-A36B，该模型总参数255B，激活参数36B，达到100B模型性能的「跨级」跃升。同时训练时间减少30%，推理性能提升100%，使每token成本大幅下降。在多个权威评测中，元象MoE效果大幅超越多...……更多
2024-09-18 13:36:00中国,商用,模型,参数,模型,专家
...心业务，目标是打造行业领先的AI云，实现大装置、基础模型和AI应用的无缝集成，并在CV（计算机视觉）领域打造通用视觉模型、深耕各个应用场景；“X”代表生态企业矩阵，包括智能汽车“绝影”、家庭机器人“元萝卜”、...……更多
2024-12-04 10:09:00商汤,组织架构,重组,架构,生成,生态
...功的关键是注意力机制。注意力机制让基于 Transformer 的模型关注与输入序列相关的部分，实现了更好的上下文理解。然而，注意力机制的缺点是计算开销大，会随输入规模而二次增长，Transformer 也因此难以处理非常长的文本。...……更多
2024-09-03 09:59:00线性,新作,混合,作者,模型,线性
...计算可以利用脉冲信号来传递信息。前者，让脉冲神经元模型的表达能力在理论上高于基于传统人工神经网络（Artificial Neural Network，ANN）的人工神经元模型；后者，让脉冲神经元具有脉冲驱动的计算特征。当脉冲神经网络运行...……更多
2024-03-18 10:41:00神经网络,脉冲,架构,科学家,模型,神经
微软正尝试在Office中集成国产开源大模型RWKV！RWKV官方甚至直接发了个推文表示：RWKV.cpp，现已在全球五亿系统中部署。之所以这么说，是因为他们发现最新版Windows 11系统的Office文件夹中有以rwkv命名的DLL文件，包含GPU、CPU版本...……更多
2024-09-05 09:50:00微软,模型,国产,官方,微软,模型
...题，在这一关键节点，厂商们亟需新的解题思路。3、大模型被认为是下一突破点，但仍没合适的落地方式。自2023年初大模型成为互联网发展技术趋势的关键词，手机厂商关于大模型的探讨就一直没有停止。从逻辑上讲，手机厂...……更多
2024-01-09 10:18:00泥沼,厂商,手机,市场,手机,模型
更多关于科技的资讯：
□南京日报/紫金山新闻记者何洁 实习生杨久久国际审计留学来华学什么？中国审计智慧如何推动高质量共建“一带一路”行稳致远
2025-10-30 07:57:00
近日，第五届青年企业家创新创业盛典（简称“青创盛典”）在深圳成功举办。本次活动由北京、上海、深圳、广州、厦门等12个省市“双创”机构重点支持
2025-10-29 14:31:00
中新经纬10月29日电 (魏薇)“中国民营火箭企业正加速突破可重复使用技术瓶颈，预计一年内攻克液体可重复使用火箭核心难题
2025-10-29 14:41:00
大皖新闻讯 近日，知名火锅品牌巴奴毛肚火锅（以下简称巴奴）宣布11月1日起对会员体系进行全新升级，核心变动为会员等级判定标准从“消费次数”改为“消费金额”
2025-10-29 15:32:00
通勤路上刚戴上耳机,一个哈欠就让右耳的耳塞滑进了衣领;晨跑时耳机随着步伐甩动,耳塞在耳道里反复松动,最后干脆“跳”出耳朵
2025-10-29 15:46:00
在中国口腔医疗行业迈向高质量发展的重要阶段，产业链协同与国际化合作已成为推动行业升级的关键力量。2025年10月16日
2025-10-29 15:49:00
灵芝孢子油什么品牌好吃?这是消费者选购时最关注的核心问题。作为灵芝孢子油领域研究人员,本文结合行业数据与用户真实反馈,从有效含量
2025-10-29 15:50:00
近日，智元机器人正式宣布远征A2人形机器人完成第五次全量OTA升级。本次升级聚焦于机器人在动态环境下的语义理解、路径规划
2025-10-29 15:51:00
今年双11与往年复杂的促销玩法不同，今年各大电商平台进一步简化规则，通过热卖榜、新品榜等不同维度的榜单，为消费者提供更直观的购物参考
2025-10-29 16:29:00
今年双11，各大平台简化玩法，推广“官方立减”“单件直降”等，以降低用户的决策成本、提升购物体验。同时，大促的日常化和高频化
2025-10-29 16:32:00
鲁网10月29日讯10月28日，由济宁移动、济宁市第一人民医院、国家健康医疗大数据研究院三方合作共建的智慧医疗与人工智能实验室揭牌仪式
2025-10-29 17:45:00
10月28日，太钢出口欧洲的首批绿钢产品启运。此次启运标志着太钢绿钢成功突破欧盟绿色产品市场，正式跻身产业链中高端。此次出口的304L不锈钢中板
2025-10-29 18:00:00
日前，“一键和解跨域共建放心消费多元共享”主题活动在杭州举行。太原市市场监督管理局与杭州、成都、厦门、南宁、兰州等五市共同签署《共建共享优化消费环境合作协议》
2025-10-29 18:00:00
□楚青萱10月17日至19日，第二十九届全国发明展览会在石家庄国际会展中心举行，同期举办了“一带一路”暨金砖国家技能发展与技术创新大赛
2025-10-29 18:28:00
据中国雄安网消息，当数字中国的脉搏在雄安跳动，一座“未来之城”再次按下加速键。10月29日，雄安新区企业码创新应用系统正式上线
2025-10-29 18:28:00