• 我的订阅
  • 头条热搜
MSRA:视觉生成六大技术问题
...分析结果。其次,按照常规配置,对四种损失赋予相同的权重。基于这些假设,可以按以下方式简化重构损失的计算:因此,最小化图像级重构损失的潜在空间表示将是:这不能保证x0+x1+x2+x3比x0+x1+x2更接近arg min X。假设不同深...……更多
...B版本开源了对话模型TeleChat-7B-bot,以及其huggingface格式的权重文件。此外,还开源了7B模型的int8和int4量化版本。在模型开发上,星辰语义大模型已与华为昇腾AI基础软硬件完成适配:支持Atlas300Ipro推理卡,具备int8量化能力;支...……更多
海康威视申请分类模型相关专利,提高人员分类结果的准确性
...每一神经网络层, 计算预设损失函数在该神经网络层的权重矩阵处的梯度;基于 梯度,计算该神经网络层的当前动量和当前方差;基于梯度、当 前动量、当前方差、预设学习率以及预设权重衰减系数,更新该 神经网络层的权...……更多
微软开源爆火1bit大模型推理框架!千亿参数模型量化后单CPU可跑
...然后这篇内容只有6页的论文引发热议:BitNet b1.58模型的权重被量化为三元值{-1, 0, 1},相当于在二进制系统中使用了1.58 bit来表示每个权重。采用了absmean量化函数来约束权重,将权重矩阵通过其平均绝对值进行缩放,然后四舍五...……更多
苹果AI版iOS首日火爆:聊天秒变高情商,大模型成最强嘴替
...是在此基础之上蒸馏得到。 继续训练时,低质量数据的权重会被降低,并使用数学、代码以及获得授权的高质量数据,对模型能力进行提升。该过程使用了1T tokens的数据,窗口长度也从4096变成了8192。到了下一阶段,窗口长度...……更多
芯片集群「贵」出天际,10年内单个集群价值将达万亿美元
...代人工智能中的神经网络都需要经过训练,以确定正确的权重(权重用来衡量输入信号对于神经元的影响程度,即不同输入的重要性权重),从而为其数十亿,有时甚至数万亿的内部连接赋予正确的权重。这些权重以矩阵的形式...……更多
广州视源电子科技股份有限公司申请图像分辨率放大模型训练专利,提高图像分辨率放大的计算效率
...初始图像和样本初始图像对应的样本放大图像,基于预设权重参数、可学习权重参数和样本初始图像对初始分辨率放大卷积模型进行至少一轮模型训练,得到样本初始图像对应的训练放大图像,基于样本放大图像和训练放大图像...……更多
中科华辰申请种储能数据分级处理专利,对储能数据分级处理
...进行标准化处理,并计算标准化后特征的信息熵获取初始权重,引入Q强化学习算法对权重进行在线优化,基于优化后的初始权重设计三阶分级模型,根据三阶分级模型对不同优化储能特征数据组合及动态权重进行数据分级,基...……更多
手机跑大模型提速4-5倍!微软亚研院开源新技术,有CPU就行
...要进行混合精度的矩阵乘法运算(mpGEMM),即用低精度的权重和高精度的激活向量进行计算。然而,现有的系统和硬件并不原生支持这种混合精度的矩阵乘法,因此它们通常需要将低精度的权重转换回高精度,这个过程叫做反量...……更多
字节豆包大模型团队突破残差连接局限!预训练收敛最快加速80%
...体的局限问题,超连接可通过动态调整不同层之间的连接权重,解决梯度消失和表示崩溃(Representation Collapse)之间的权衡困境。在 Dense 模型和 MoE 模型预训练中,超连接方案展示出显著的性能提升效果,使收敛速度最高可加速 ...……更多
泰康港股通大消费指数A(006786)跟踪指数涨超1%,权重股阿里巴巴-W一度涨超8%,有望携手苹果共创AI手机生态
...W、美团-W、比亚迪股份、创科实业、百胜中国等,前十大权重股合计占比58.03%。据业内消息,阿里将为中国iPhone开发AI功能。公开资料显示,阿里云推出的通义千问Qwen大模型已经成为全球最大的开源模型族群之一。1月29日,阿里...……更多
一文看懂AI结果优化(AIRO)和生成引擎优化(GEO)的区别
...一、核心定义与目标差异1.AI结果优化(AIRO):动态品牌推荐权重的争夺AIRO技术应用出现在2024年年初,其核心是通过AI算法分析、关键词策略优化、大数据模型训练、官网平台增强等优化技术,动态提升品牌在AI交互场景中的曝光率和...……更多
“国家队”AI大模型正式发布,AI人工智能ETF(512930)持续获资金积极布局
...2024年4月30日,中证沪港深线上消费主题指数(931481)前十大权重股分别为美团-W(03690)、腾讯控股(00700)、快手-W(01024)、顺丰控股(002352)、科大讯飞(002230)、昆仑万维(300418)、京东健康(06618)、世纪华通(002602)、圆通速递(6……更多
浪潮云申请一种摘要生成方法专利,能生成具有连贯性和可读性的摘要
...的目标图模型;基于所述预设自然语言处理方法中的预设权重计算公式确定所述目标图模型中各所述分割后文本的权重数组,并基于所述权重数组从各所述分割后文本中确定目标分割后文本;对所述目标分割后文本进行相应的向...……更多
刚刚,谷歌ViT核心骨干集体投奔OpenAI:他们为Sora打下基础
...个多模态研究小组。重点研究多模态数据(WebLI)、开放权重模型 ( SigLIP、PaliGemma )以及文化包容性。目前谷歌学术引用数超六万多。2014年他毕业于北京大学,获得计算机系博士学位;本科毕业于南京大学。一毕业就前往谷歌苏...……更多
AI时代的三大优化技术 一文认识AI结果优化、生成式引擎优化与AI搜索优化
...训练等手段,动态提升品牌在AI交互场景中的曝光率和推荐权重,让品牌在用户主动询问时优先被推荐,形成精准流量入口,实现AI为品牌推广。例如当用户询问“上海高端咖啡一线品牌”时,经AIRO优化的品牌会优先出现在推荐列表中...……更多
1-bit大模型还能再突破!新一代BitNet架构启用4位激活值
...和前馈网络(FFN)中的线性投影,以从头开始学习1.58 bit权重。对于激活值,采用混合量化和稀疏化策略来减轻异常值维度引入的误差。图2说明了模型大小为7B的BitNet b1.58中,每个模块输入的分布。注意力层和FFN层的输入通常类...……更多
美女刷屏真假难辨网友:警惕ai网恋诈骗
...单块11GB显存的RTX2080Ti实现模型完整微调,同时原始模型权重冻结,新训练出来的权重可以保存为3MB大小的单个文件发布。这项技术被AI绘画爱好者用来让模型固定生成一个物体,最流行的就是固定一个人物形象。现在,在CivitAI...……更多
Meta首款多模态Llama 3.2开源!1B羊驼宝宝,跑在手机上了
...个全新的模型架构。在图像输入方面,训练了一组适配器权重,将预训练的图像编码器集成到预训练的大语言模型中。具体来说,该适配器:由一系列交叉注意力层组成,负责将图像编码器的表示输入进大语言模型通过在文本-...……更多
「世界开源新王」跌落神坛?重测跑分暴跌实锤造假,2人团队光速「滑跪」
...过一个月的漫长等待,团队终于放出了Reflection 70B的模型权重、训练数据、训练脚本和评估代码。模型权重: https://huggingface.co/glaiveai/Reflection-Llama-3.1-70B训练数据: https://huggingface……更多
刚刚,Llama 3.2 来了!支持图像推理,还有可在手机上运行的版本
...。具体来说,为了支持图像输入,Meta 训练了一组适应器权重(adapter weight),其可将预训练的图像编码器集成到预训练的语言模型中。该适应器由一系列交叉注意层组成,这些层的作用是将图像编码器表征馈送给语言模型。为...……更多
pytorchtorchao正式发布,提供了一系列优化工具集
...高效训练。在推理方面,torchao提供多种量化方法,包括权重量化(Weight-OnlyQuantization)和动态激活量化(DynamicActivationQuantization),用户可以自有选择适合的量化策略,以获得最佳的模型推理性能。在稀疏性优化方面,torchao可以...……更多
微调大模型,AMD MI300X就够了!跟着这篇博客微调Llama 3.1 405B
...PU 上训练 LLaMA 405B 模型。我们使用 LoRA 微调,将所有模型权重和 LoRA 参数都设为 bfloat16,LoRA rank 设为 8,LoRA alpha 设为 16: 模型大小:LLaMA 模型的权重占用了约 800GB 的显存。 LoRA 权重 + 优化器状态:大……更多
多模态模型、短剧游戏盘中逆市走强,文娱传媒ETF涨0.11%
...反映文化、娱乐以及传媒主题板块的整体表现。指数十大权重股中包括分众传媒、三七互娱、芒果超媒、昆仑万维等权重股。 ……更多
无需训练即可大幅提升SAM 2!SAM2Long来了,港中文 上海AI Lab出品
...ng 通过以下几个步骤来调整每个内存帧在注意力计算中的权重。首先,定义一组线性分布的标准权重,用于对内存中的帧进行加权。这些权重在一个预定义的范围 [w_low, w_high] 之间线性分布,较高的权重将分配给那些重要的内存...……更多
模拟5亿年自然进化史,全新蛋白质大模型ESM3诞生!前Meta老将力作LeCun转赞
...m但比较遗憾的是,目前在HuggingFace仓库中还没有公开模型权重。英伟达官方博客显示,ESM3将在Nvidia BieNeMo平台提供一个小型开源版本的代码和权重,但仅限于非商业用途。仓库地址:https://huggingface.co/EvolutionaryScale/esm3-s……更多
京东云曹鹏:AI变革之下,大模型技术如何为企业未来赋能?
...型的适用性和准确性;通过大模型压缩技术,去除对企业权重低的模型神经元,同时提高模型推理速度,降低能耗,使企业使用模型更经济;通过大模型推拉技术,快速低成本地获取企业专属业务模型,推理侧模型显存节约70%,...……更多
OpenAI重拾规则系统,用「AI版机器人定律」守护大模型安全
...在表 2 中,作者给出了几个不同模型大小的总体准确度。权重和 RBR 函数:RBR 是关于特征的简单 ML 模型,并且在所有实验中,它都是一个线性模型,具有可学习参数 w = {w_0, w_1, . . . , w_N },给定 N 个特征:内循环:拟合 RBR RBR ...……更多
王兴兴、朱啸虎们说了些AI创业真心话
...,也可以讲是一个漏洞。它只是明确地提出了对“闭源”权重的出口管制,而专门强调了“开源”的权重不在管制之列。 当时,世界上最好的基础模型都是在美国头部的那几家公司。可是就在1月31日,随着千问Qwen的开源,DeepSe...……更多
深度剖析:谷歌、微软等AI巨头承诺的“自愿监管”做到了吗?
...络安全和内部威胁防护措施,以保护专有和未发布的模型权重。这些模型权重是人工智能系统最重要的部分,各家公司一致认为,仅在有意且考虑到安全风险时才发布模型权重,这一点至关重要。许多公司在过去一年实施了新的...……更多
更多关于科技的资讯:
合肥新视野|东超科技:以无介质成像技术联结科技与生活新场景
大皖新闻讯 无需触碰实体屏幕,仅在空中动动手指就能完成挂号操作——这宛如科幻电影的场景,在安徽省东超科技有限公司(以下简称“东超科技”)的展厅内已成为现实
2025-12-09 21:39:00
越见企业家|卓谊生物让安全“看得见” 一支疫苗的承诺
二十年前,一位南方企业家踏上黑土地;二十年后,他手中的一支疫苗,凝结着南北融合的智慧,更承载着对生命安全的极致承诺。在2025长春健康产业博览会上
2025-12-09 16:55:00
不少家长对儿童电话手表“又爱又恨”。爱的是其定位、通话功能能让家长随时掌握孩子动态、保持联系;恨的是它功能日渐繁杂,从“安全工具”沦为“社交神器”
2025-12-09 16:59:00
技术赋能与文化活化双轮驱动— 沉浸式交互动漫人工智能创作高研班精彩不断
当数字技术遇上传统文化,会碰撞出怎样的创作火花?截至11月30日,国家艺术基金2025年度资助的“沉浸式交互动漫人工智能创作高级人才培养”项目
2025-12-09 12:34:00
以创新叩响未来之门:“凯叔讲故事”荣获第五届未来视听创新大赛优秀奖
以创新叩响未来之门:“凯叔讲故事”荣获第五届未来视听创新大赛优秀奖近日,第五届未来视听创新大赛获奖名单在京正式揭晓。在这场由国家广播电视总局
2025-12-09 13:04:00
科技创新铸就发展引擎 东风汽车自主动力技术再攀新高峰
2025年岁末,中国汽车产业科技创新版图再添浓墨重彩的一笔。12月8日,东风汽车自研全新马赫1.5T混动发动机凭借48
2025-12-09 13:34:00
乌江榨菜登顶山姆“双榜第一”,终端销售额突破千万元大关
近日,『乌江x山姆』双拼组合装乌江爽脆涪陵榨菜在山姆会员商店交出亮眼成绩单。这款10月22日在全国上市的新品,仅用一个月时间便荣登山姆会员店新品热度榜TOP1与酱菜类热度榜TOP1
2025-12-09 13:34:00
聚焦健博会|17 项专利加持!长春本土 “康复黑科技”设备 “走进寻常百姓家”
9日,在2025长春国际医药健康产业博览会现场,展厅内人流如织,聚焦“医学、医药、医疗、医养”的展馆内,带来智能康复设备的吉林省微渺医疗科技有限公司
2025-12-09 13:47:00
租赁市场价格“退烧” 租个人形机器人从每天两万元降至数千元
人形机器人在活动现场“上岗”。 (受访者 供图)人形机器人在展会现场“接待”。(厦门日报记者 杨霞瑜 摄) 厦门网讯 (厦门日报记者 杨霞瑜)有机器人在学校运动会上岗当纪律员
2025-12-09 08:57:00
钉钉安全护航:祝贺“国产GPU第一股”摩尔线程成功上市
12月5日,钉钉客户摩尔线程智能科技(北京)股份有限公司(以下简称“摩尔线程”)正式在上海证券交易所科创板挂牌上市,成为“国产GPU第一股”
2025-12-09 09:53:00
RGB-MiniLED 电视哪款值得入手?重点关注这几点
面对市场上各式各样的RGB-MiniLED电视,如何挑选一台真正适合自己、能提升生活品质的型号?如果你正在纠结“哪款值得入手”
2025-12-09 10:05:00
RGB-MiniLED 电视选哪款?一文读懂RGB-MiniLED为何成为高端首选
当电视行业步入以RGB-MiniLED为关键词的高画质竞赛,甄别技术的真伪与深度成为选购第一步。真正的RGB-MiniLED
2025-12-09 10:01:00
炎黄盈动重磅发布企业级AI平台,全面加速企业AI价值落地
随着AI技术的飞速发展,企业正面临从技术试点到全面应用的关键转折点。技术加速:Gartner报告显示,当前AI智能体和AI就绪型数据发展最快
2025-12-08 11:12:00
路边放一台南迪售货机,打造全时段消费新主张
还在为寻找稳定、低风险的增收渠道而烦恼吗?将一台南迪自动售货机放置在路边,它不仅是24小时不休的“金牌销售”,更是能创造被动收入的坚实资产
2025-12-08 13:35:00
人人租亮相2025中国企业家博鳌论坛平行论坛-创新探索、生态共筑
十年博鳌潮海阔,百舸争流共进发。12月2日至5日,2025企业家博鳌论坛系列活动在海南博鳌举办。围绕“链接全球,引领未来
2025-12-08 13:39:00