• 我的订阅
  • 头条热搜
4轮暴训,Llama 7B击败GPT-4!Meta等让LLM「分饰三角」自评自进化
...actor-judge的互动中再引入meta-judge,且由同一个模型「分饰三角」,不需要额外人类数据的参与。其中,actor负责对给定提示生成响应;judge负责为自己的响应进行评价和打分;而meta-judge会对自己的打分质量进行对比。最终的优化...……更多
LLM超越人类时该如何对齐?谷歌用新RLHF框架解决了这个问题
让 LLM 在自我进化时也能保持对齐。我们这个世界是不断变化的开放世界。人工智能要在这个世界长久立足,就需要突破许多限制,包括可用数据和规模和质量以及有用新信息的增长率。对基于 LLM 的 AI 来说,高质量的人类数据...……更多
首个o1复现开源RL框架OpenR来了,UCL、上交等高校联合团队发布
...理教授(研究)杨林易。o1 作为 OpenAI 在推理领域的最新模型,大幅度提升了 GPT-4o 在推理任务上的表现,甚至超过了平均人类水平。o1 背后的技术到底是什么?OpenAI 技术报告中所强调的强化学习和推断阶段的 Scaling Law 如何实现...……更多
文心大模型4.0 Turbo来了!百度推出文心快码2.5,已覆盖内部80%程序员
...步研发了智能体(Agent)机制,包括理解、规划、反思和进化,使其能够可靠执行、自我进化,并一定程度上将思考过程白盒化,让大模型像人一样思考和行动,调用工具自主完成复杂任务,在环境中持续学习实现自主进化。 ...……更多
与OpenAI o1技术理念相似,TDPO-R算法有效缓解奖励过优化问题
...计算机学院攻读博士二年级,研究方向为强化学习、扩散模型和大模型对齐。OpenAI 最近发布的 o1 模型在数学、代码生成和长程规划等复杂任务上取得了突破性进展,据业内人士分析披露,其关键技术在于基于强化学习的搜索与...……更多
百图生科高亮:AI大模型或改写生命科学领域的研发技术能力
...改写生命科学领域的研发技术能力。“大模型可以从所有进化知识中学习可能性和收敛规律,跳出局部最优,快速迭代演化,从而拥有高效的全新蛋白设计能力。”此外,高亮认为,若要做好生物计算大模型引擎,须有三大模块...……更多
...。但正如电池行业的铁律:成本、性能与安全是不可能之三角,电池厂商往往需要做出取舍,才有机会在风云诡谲的产业中立足。高阶智能驾驶也面临同样困境:高质量、低成本与大规模,几乎不可兼得。目前,市面上城区智驾...……更多
文心大模型赋能千行百业,自主进化
...这四大能力也为通用人工智能的实现带来了曙光。 自主进化时代周报:百度文心大模型的技术迭代过程及最新进化程度如何?吴昊:2019年,百度推出了文心大模型1.0,然后持续演进到2.0、3.0版本,今年5月份升级到3.5版本。文...……更多
零成本突破多模态大模型瓶颈!多所美国顶尖高校华人团队,联合推出自增强技术CSR
新智元报道编辑:LRST【新智元导读】现有多模态大模型在对齐不同模态时面临幻觉和细粒度感知不足等问题,传统偏好学习方法依赖可能不适配的外源数据,存在成本和质量问题。Calibrated Self-Rewarding(CSR)框架通过自我增强学...……更多
千行百业加速拥抱大模型(AI前沿观察)
...北超级智算中心等陆续投入运营。今年以来,中国联通长三角(芜湖)智算中心、河北石家庄智算中心等相继启动建设。 当前,各地加速推动算力基础设施建设,提升算力供给能力。《北京市促进通用人工智能创新发展的若干...……更多
“百模大战”下半场:野蛮生长后,如何避免重复“造轮子”?
...多领域表现出了让人惊艳的创作能力,并且每天都在快速进化。业内专家认为,这一技术带来的产业红利才刚刚初露峥嵘,AIGC与数字经济、实体经济的深度融合,还将创造出更多颠覆性的社会价值、经济价值,有望开启一场关...……更多
ChatGPT走红背后:苦熬五年,三次AI路线迭代|行业观察
...让AI真正可用好用,才是终章。参考文献:《透过ChatGPT的进化足迹,OpenAI传达了哪些信号?》,脑极体《百度类ChatGPT产品将在3月完成内测 业内人士:谨慎乐观》,财联社《ChatGPT爆火,揭秘AI大模型背后的高性能计算网络》,Inf...……更多
整合长期记忆,AI实现自我进化,探索大模型这一可能性
...杂性是我们的意识和智慧的来源。而这一切背后的机制是进化(evolution)。到了现今的大模型时代,强大的基础模型已经展现出了强大的智能水平,能完成多种多样的任务。但它们也有个缺点,训练之后就基本定型了,难以随着...……更多
...位生产效率。规模化商用指日可待证券时报记者:大模型进化到目前的水平,哪些方面让您觉得惊艳?哪些方面表现平平?潘青华:应该说大模型进化到现在,虽然表现得不够完美,但已经足够让人惊奇。我们注意到,大模型在...……更多
OpenAI 超强 o1 智商超 120 遥遥领先于其他模型:1 小时写出 NASA 博士 1 年代码,最新编程赛超越 99.8% 选手
...成的博士论文代码,竟被 AI 在 1 个小时之内实现了。o1 模型已经强到,能够直出博士论文代码了!来自加州大学欧文分校(UCI)的物理学博士 Kyle Kabasares,实测 o1 preview+mini 后发现:自己肝了大约 1 年的博士代码,o1 竟在 1 小时...……更多
京东探索研究院院长、京东科技人工智能业务负责人何晓冬:让大模型在产业先跑起来
...。具体来看,言犀大模型在语言模型的基础上,实现了自进化技术,通过构建偏好数据集和奖励模型打分机制,促进模型的快速迭代更新;在推理技术方面,京东采用了端到端低比特高精度量化技术,有效降低了模型体积,同时...……更多
3天把Llama训成Mamba,性能不降,推理更快!
...大尺寸Mamba模型的却很少。目前比较有名的是AI21的Jamba(进化到了1.5版本,最大398B,MoE),以及NVIDIA的Hybrid Mamba2模型(8B)。不过世界上有那么多成功的Transformer大模型,而知识就包含在这些模型参数里。如果能够锁住知识,同...……更多
李彦宏发布文心大模型4.0工具版,推理成本降到1%
...大量的AI原生应用。智能体机制包括理解、规划、反思和进化,它让机器像人一样思考和行动,可以自主完成复杂任务,在环境中持续学习、实现自我迭代和自我进化。“在一些复杂系统中,我们还可以让不同的智能体互动,相...……更多
百度文心大模型4.0技术进展
...百度进一步研制了智能体机制,包括理解、规划、反思和进化,能够做到可靠执行、自我进化,并一定程度上将思考过程白盒化,让机器像人一样思考和行动,自主完成复杂任务,在环境中持续学习实现自主进化。文心一言助力...……更多
Sam Altman或筹数十亿美元自造AI芯片,DeepMind首席科学家或将辞职创业
...僵化和脆弱,无法适应环境。他们从自然界的集体智慧、进化和涌现等原则中获取灵感,构建更灵活、反应灵敏的人工智能模型。Sakana来源于日语さかな,意为“鱼”。其背后的理念是“让一群鱼聚集在一起,从简单的规则中形...……更多
半年冒出近百家新公司,「具身智能」也有春天 | 36氪新风向
...分布上,以北京为代表的北方公司,理想派偏多;而以珠三角为代表的南方,现实派偏多。这与行业人员的出身背景、投资方的偏好有关。北方的项目大多孵化于高校(清华、北大、中科大、北航、北理工等等),从高校实验室...……更多
苹果AI版iOS首日火爆:聊天秒变高情商,大模型成最强嘴替
...变得儒雅随和:开启Apple Intelligence后,苹果自研的端侧大模型就会被下载到设备当中。根据手快的网友体验反馈,不像其他家的AI那样动不动就是拒绝服务。与此同时,苹果自家大模型的报告也已出炉,披露了大量技术细节。报...……更多
...心集群建设,实现对大规模算力的集中部署。9月1日,长三角(芜湖)智算中心发布会召开,芜湖市政府与中国电信安徽公司就长三角(芜湖)智算中心建设运营工作签订合作协议;9月26日,芜湖集群(润六尺)智算中心1000P算...……更多
CMU清华教LLM练成数学高手,LeanSTaR训练模型边思考边证明,登顶新SOTA
...学生怎么办?CMU清华团队提出了Lean-STaR训练框架,在语言模型进行推理的每一步中都植入CoT,提升了模型的定理证明能力,成为miniF2F上的新SOTA。如果想训练LLM证明定理的能力,你会怎么做?既然模型可以通过海量语料学会生成...……更多
chatgpt低成本复现流程开源
首个开源的ChatGPT低成本复现流程来了!预训练、奖励模型训练、强化学习训练,一次性打通。最小demo训练流程仅需1.62GB显存,随便一张消费级显卡都能满足了。单卡模型容量最多提升10.3倍。相比原生PyTorch,单机训练速度最高...……更多
依图科技的人工智能究竟赢在哪儿?
...这得从它的三个核心特点说起——\"会思考、可对话、能进化\"。 首先,\"会思考\"是依图天问大模型的核心能力之一。它能够准确识别视频中的内容,将机器的视觉能力转化为直观的算法。这种能力不仅提升了视频监控的智能...……更多
L4级自动驾驶首次赋能家用车 百度辅助极越创造历史
...+高精地图+规则算法”组合完成,但随着AI大模型的快速进化,激光雷达和高精地图的“拐杖”角色将逐步被取代,纯视觉以强大的自我学习能力,不断提升智驾水平。 基于百度Apollo的L4级自动驾驶原子化能力和安全体系全面赋...……更多
刚刚,百度最高奖发出2800万!李彦宏:再苦不能苦技术人
...云帆”和“轻舟”。其中,“纵横”项目重点突破大语言模型万卡集群高效训练难题,支撑文心大模型高效训练迭代;“百炼” 项目专攻新一代大语言模型预训练技术创新,全面提升文心大模型效果;“云帆”项目将生成式大...……更多
GPT刚刚公开「草莓」项目:推理能力翻倍,定价200美元?
...发展超出了某些董事会成员的预期。他们担心 AI 的快速进化带来不可控的风险,甚至可能对社会产生深远的影响。OpenAI内部,围绕「Q*」是否应该继续推进的争论愈演愈烈。部分董事会成员认为项目的推进过于激进,尤其是涉及...……更多
入职一年半,这个AI员工晋升为了国内首位AI架构师
...构师这一进阶职业发起挑战。随着 AI 在研发领域的不断进化,能提供给工程师的助力越来越多,从原先单纯的编码加速器不断延展到架构理解、质量分析、安全扫描、测试生成等更多领域。同时结合 RAG 技术的不断落地应用,对...……更多
更多关于科技的资讯:
电梯曳引机润滑油更换周期揭秘——守护电梯心脏,从定期换油开始
电梯作为现代建筑的垂直交通工具,其核心部件曳引机的正常运行至关重要。而润滑油则是曳引机保养的关键,定期更换润滑油能有效延长电梯使用寿命
2024-11-12 13:23:00
三星二代3nm良品率只有可怜的20%!一代也还不合格
快科技11月12日消息,这几年,三星代工一直不顺利,要么进展延期,要么性能不达标,宣传上天的最新3nm更是步履坎坷,一直在为良品率发愁
2024-11-12 13:47:00
得物App入选诚信案例,10万正品样品库夯实高品质消费
近日,以“加强企业诚信建设赋能经济社会发展”为主题的“2024年全国企业诚信建设大会”在烟台市召开。此次大会由中国企业联合会
2024-11-12 14:05:00
高质量发展看山西国企:“华阳造”钠电煤矿应急电源顺利通过省级评审
11月9日,经山西省能源局、省应急管理厅、国家矿山安全监察局山西局组织专家鉴定评审,“华阳造”钠离子电池煤矿应急电源产品性能优异
2024-11-12 14:22:00
vivo申请PhoneGPT商标
vivo申请iQOOPhoneGPT商标天眼查知识产权信息显示,近日,维沃移动通信有限公司申请注册多枚“vivoPhoneGPT”“iQOOPhoneGPT”商标
2024-11-12 14:22:00
第七届中国国际进口博览会(以下简称“进博会”)盛况空前,超过400项代表性新产品、新技术和新服务悉数亮相,不仅展示了全球范围内的最新趋势
2024-11-12 14:23:00
亚马逊市场的机遇与挑战
亚马逊作为全球最大的在线零售平台,一直是电商创业者和品牌商的必争之地,随着越来越多的卖家涌入,关于亚马逊市场是否饱和、是否仍值得投入的讨论愈发热烈
2024-11-12 14:43:00
林埭镇消防日:查知科技引领,火灾预警应急演练成功举办
在全国消防宣传日这一具有特殊意义的日子里,查知科技以高度的社会责任感和专业精神,携手平湖市林埭镇人民政府,于11月9日成功举办了“厂中厂”火灾预警应急演练
2024-11-12 14:45:00
雷军恭喜比亚迪:祝贺仰望U9纽北取得的成绩
快科技11月12日消息,比亚迪仰望销售事业部总经理胡晓庆宣布:仰望U9本年度测试已经完成,但纽北的故事仍在继续。胡晓庆表示
2024-11-12 14:47:00
蛋白含量比鸡蛋高 膳食纤维比燕麦优秀!这种食材被严重忽视了
如果你有减肥、健身经历,那么,有一种食物你或多或少会有些了解,那就是藜麦。在轻食或沙拉里,藜麦一般以主食的角色出现。它有何特点和营养优势
2024-11-12 14:47:00
所有厂商的最强对手!赵明称期待和华为Mate 70碰撞
快科技11月12日消息,在直播活动中,荣耀CEO赵明谈及华为Mate70与荣耀的竞争。赵明表示,荣耀Magic7作为“初生牛犊”
2024-11-12 14:47:00
济南东部新地标!济高·世茂芯环中心芯意启幕!
鲁网11月12日讯在当今时代,商业综合体不再仅仅是一个购物和娱乐的场所,它已经成为城市文化和精神生活的重要组成部分。非标商业项目
2024-11-12 14:48:00
国网朝阳供电公司荣获2024年能源北斗创新应用竞赛“优秀案例奖”
本文转自:人民网-辽宁频道11月6日至7日,由中国卫星导航定位协会、中国能源研究会联合主办的2024年(第四届)能源北斗与时空智能创新技术应用大会在广州召开
2024-11-12 14:49:00
NMN双十一排名捷报:美国W+端粒塔荣耀登顶,众多品牌齐放异
在这个全民狂欢的双十一购物节,NMN(β-烟酰胺单核苷酸)市场迎来了前所未有的热潮。在众多消费者的热切期待中,各大NMN品牌纷纷亮出实力
2024-11-12 14:51:00
本文转自:人民网人民网记者 乔业琼有的人频频“剁手”,满载而归;有的人保持“理性”,货比三家、谨慎下单。“双十一”,如同一场消费者的购物盛宴
2024-11-12 14:51:00