• 我的订阅
  • 头条热搜
中国信通院发布大模型安全基准测试报告 360智脑综合排名第一
本文转自:中国新闻网近日,中国信息通信研究院发布大模型安全基准测试AI Safety Bench 2024年Q1的首轮测评报告(下称“测评报告”),结果显示,三六零集团自研的认知通用大模型360智脑综合排名第一。大模型安全基准测试AI Safet...……更多
...范能力,今年2月,中国信息通信研究院(以下简称中国信通院)联合360集团,发起大模型安全基准测试SafetyAI Bench制定工作。大模型安全基准测试秉持“公平公正、产业应用、选型参考”原则,采用科学严谨的测试方法,评估大...……更多
日前,“2024中国信通院ICT深度观察报告会”人工智能伙伴分论坛在京召开。会上,“CAICT人工智能伙伴计划”启动。未来,中国信通院将与合作伙伴紧密围绕国家重大需求,在政策研究、标准制定、开放共享、行业赋能以及国...……更多
AI安全守护计划启动!信通院牵头,AIIA安全治理委员会发布三类模型安全评测
...、安全组两个工作组,近百家单位加入,主任单位由中国信通院牵头,副主任单位包括多家知名企业和高校。其中,治理组工作围绕AI治理框架、合规治理、赋能治理展开,安全组主要开展大模型安全、合规等研究及基准测试。...……更多
...记者10日从中国信息通信研究院了解到,今年6月来,中国信通院选取多款通用大模型和医疗健康行业大模型开展效能评估工作,结果显示,通用大模型在医学知识广度方面具有一定优势,医疗健康行业大模型在特定医疗任务上表...……更多
浪潮科技作为首批成员单位加入信通院“政务大模型推进中心”
12月21日,"2024中国信通院ICT深度观察报告会政企数字化转型论坛"在北京召开。此次论坛聚焦政企数字化转型,浪潮科技作为首批成员单位受邀出席“政务大模型推进中心”成立仪式。中国信通院作为国内IT领域重要权威机构...……更多
中国信通院发布《代码大模型》标准
...,据人工智能产业发展联盟AIIA消息,2024年1月25日,中国信通院联合中国工商银行牵头发布《智能化软件工程技术和应用要求第1部分:代码大模型》标准,该标准适用于企业在代码大模型的研发、评估和验收等过程中,为代码大...……更多
...促人工智能应用以人为本,智能向善。近日,在2025中国信通院深度观察报告会主论坛上,首批17家企业正式签署《承诺》。《承诺》凝聚产业界守护人工智能安全、促进人工智能向善的基本共识,旨在共同应对技术变革带来的复...……更多
「世界开源新王」跌落神坛?重测跑分暴跌实锤造假,2人团队光速「滑跪」
...性消息——结果没多久,Reflection 70B就被打假了:公布的基准测试结果和他们的独立测试之间存在显著差异。无论是AI研究者,还是第三方评估者,都无法复现Matt Shumer所声称的结果。根据Artificial Analysis的数据,Reflection 70B在基准...……更多
...水电装备、安全应急装备等重点行业装备领域,发挥中国信通院在数字孪生、人工智能、大数据等信息技术领域的创新优势,开展基于数据科学的装备模型构建、仿真、验证等工作,致力于为产业界提供一批基于模型的装备优化...……更多
...全性方面的问题已经受到业内高度关注。今年8月,中国信通院发文称,近年来,以大模型为核心的人工智能技术飞速发展,成为数字经济增长新动能。然而,作为新质生产力的大模型在安全性方面仍存在较多缺陷,这为其大规...……更多
AI科学家太多,谁靠谱一试便知!普林斯顿新基准CORE-Bench:最强模型仅有21%准确率
【新智元导读】普林斯顿大学新发布的CORE-Bench基准测试,通过270个基于90篇跨学科科学论文的任务,可评估AI智能体在计算可重复性方面的表现,最简单任务的准确率可以达到60%,最难任务准确率仅有21%大模型的能力越来越强,...……更多
本文转自:人民网12月27日,2024人工智能赋能新型工业化大会在北京召开,中国信息通信研究院发布《人工智能治理蓝皮书(2024年)》,引发业界和学界的广泛关注。报告指出,近年来,人工智能技术颠覆性、跨越式突破引发...……更多
南京经开区举行大模型产业发展推进会
...目签约落地,“智谷杯”大模型应用创新大赛颁奖,中国信通院大模型“样板间工程”优秀案例颁证,“可信AI”大模型评估最新结果发布……南京经开区力推大模型和产业融合,不断丰富产业生态,增强产业发展韧劲,正在加...……更多
首家!数势科技通过中国信通院数据指标管理平台技术要求专项测试
2024年5月10日,在中国信息通信研究院(以下简称“中国信通院”)组织的首批数据指标管理平台技术要求专项测试中,北京数势云创科技有限公司(以下简称“数势科技”)顺利完成了数据指标管理平台技术要求专项测试的全...……更多
嘉为蓝鲸荣誉入选信通院汽车云市场图谱
...格局。历经严格的框架讨论、评估、遴选多个环节,中国信通院汽车云工作组发布了《汽车云市场图谱1.0》,全方位展示在汽车云领域处于领先地位的代表性企业。嘉为科技旗下研运解决方案品牌嘉为蓝鲸荣誉上榜云服务厂商优...……更多
突发!谷歌发布史上最强大模型Gemini,打爆GPT-4
...的高效Gemini版本(1.8B/3.25B)其中Gemini Ultra一上来就在32个基准测试中拿下30个SOTA,并且第一个在MMLU基准上达到人类专家水平。而Gemini Pro从今天起,就会在Bard中实装上线。 同时,谷歌Gemini团队还公布了一份60页的详细技术报告...……更多
迈向多语言医疗大模型:大规模预训练语料,开源模型与全面基准测试
...一款名为 MMed-Llama 3 的全新基座模型,以 8B 的尺寸在多项基准测试中超越了现有的开源模型,更加适合通过医学指令微调,适配到各种医学场景。 所有数据和代码、模型均已开源。MMedBench 上的准确率,图 d 展⽰了在 MMedC 上进...……更多
中国信通院与联想集团联合发布《中国企业智能化成熟度报告(2022)》 助力高质量发展行稳致远
...自:人民日报1月11日,中国信息通信研究院(简称“中国信通院”)与联想集团共同发布《中国企业智能化成熟度报告(2022)》(简称《报告》)。《报告》提出兼具实用性和可操作性的智能化转型方法论,致力于帮助广大企...……更多
多模态竞技场对标90B Llama 3.2!Pixtral 12B技术报告全公开
...要好。 最后,与开源模型一起,Mistral还贡献了一个开源基准测试MM-MT-Bench,用于在实际场景中评估视觉语言模型。技术细节当前的多模态大模型基本上都是:模态编码器 + 投影模块 + 大语言模型主干。如果需要多模态输出,后...……更多
代码模型自我进化超越GPT-4o蒸馏!UIUC伯克利等提出自对齐方法 | NIPS 2024
...,超过了参数量大10倍的CodeLlama-70B-Instruct。在全部的三项基准测试(代码生成、数据科学编程、代码编辑)中,SelfCodeAlign都战胜了之前最先进的指令微调方法OctoPack。此外,在HumanEval+上,SelfCodeAlign的性能超越了基于GPT-3.5……更多
苹果AI震撼上线iPhone,进化版Siri却没有ChatGPT!47页技术报告揭秘自研模型
...示了AFM-server在HuggingFace OpenLLM排行榜V1,以及HELM-Lite v1.5.0基准上的结果。可以看到,AFM预训练模型有着强大的语言和推理能力,从而为后训练和特征微调提供了坚实的基础。后训练 人类评估对于苹果AI的应用场景来说,人类评估...……更多
微软华人团队发布全新基准AGIEval,专为人类考试而生
随着语言模型的能力越来越强,现有的这些评估基准实在有点小儿科了,有些任务的性能都甩了人类一截。通用人工智能(AGI)的一个重要特点是模型具有处理人类水平任务的泛化能力,而依赖于人工数据集的传统基准测试并...……更多
自动化、可复现,基于大语言模型群体智能的多维评估基准
...)也越来越强。因此,在多样的应用场景中对其进行性能基准测试已成为了一项重大挑战。目前最受欢迎的基准测试是 Chatbot Arena,它通过收集用户对模型输出的偏好来对 LLM 进行综合排名。然而,随着 LLM 逐渐落地于众多应用场...……更多
2023 AI现状报告:GPT-4仍最强,监管方向缺乏全球共识
...变得更加强大和灵活,比较它们的能力越来越困难。由于基准变得不那么明确,用于评估大语言模型的“基于氛围”的方法在业界越来越普遍。·人工智能安全在2023年首次占据舞台中心。但人工智能界内部存在深刻分歧,世界各...……更多
OpenAI o1 模型 PlanBench 规划能力实测:准确率 97.8%
... 日消息,来自亚利桑那州立大学的科研团队利用 PlanBench 基准,测试了 OpenAI o1 模型的规划能力。研究结果表明 o1 模型取得了长足的进步,但仍然存在很大的局限性。PlanBench 基准简介PlanBench 开发于 2022 年,用于评估人工智能系...……更多
OpenAI新功能 “深度研究” 登场,人类终极考试的表现超过DeepSeek R1
...泛学科领域的表现,被视为衡量人工智能学术能力的前沿基准。该测试包含超过3000道多项选择题和简答题,涵盖从语言学到火箭科学、从古典学到生态学等100多个学科领域。 由此也可以看出,DeepSeek确实让OpenAI感觉到压力不小...……更多
联想与信通院发企业智能化成熟度报告:中国企业智能化转型进入深水区
1月12日消息,近日,联想集团联合中国信息通信研究院发布业内首份《中国企业智能化成熟度报告(2022)》,《报告》指出中国企业智能化转型已经进入“深水区”。资料图在汲取业界已有理论研究成果,对比参考政府、行业...……更多
提质降价,国产大模型加速奔跑
...娱、能源等行业都能看到大模型的身影。”她说。 中国信通院政策与经济研究所主任工程师程莹认为,国产大模型技术在语言、视觉、多模态等领域持续突破,在文本、音频、视觉、3D等数据方面实现多模态统一,持续突破人...……更多
LLM仍然不能规划,刷屏的OpenAI o1远未达到饱和
...史记录。o1 模型拥有真正的通用推理能力。在一系列高难基准测试中展现出了超强实力,相比 GPT-4o 有巨大提升,让大模型的上限从「没法看」直接上升到优秀水平,不专门训练直接数学奥赛金牌,甚至能在博士级别的科学问答...……更多
更多关于科技的资讯:
分时租赁 无线充电
南京日报/紫金山新闻记者 段仁虎 摄2月12日,位于中山东路西安门附近的一酒店门前,南京本地企业创新推出的主城区首个酒店端分时租赁电动自行车服务项目落地运行
2025-02-13 08:12:00
“打开新世界的大门”“一天可以换800个手机壳”。近期,“千变万化”的墨水屏手机壳成功吸引了消费者的眼球。这类手机壳除了有常规的保护功能外
2025-02-13 08:29:00
正月十五闹元宵。近期汤圆市场热闹非凡:绿色的蛇脑袋,粉色的腮红,还吐着粉色的信子……爱稞云点、雪霸王、良芯匠人等食品品牌在设计上别出心裁
2025-02-13 08:29:00
预售价4.78万!国产K-car五菱之光EV将于明晚正式上市
快科技2月13日消息,五菱之光EV即将于2月14日在广州的浪漫奇妙夜活动中正式上市,预售价区间为4.78-5.08万元
2025-02-13 08:50:00
周鸿祎称打工混日子是最糟糕选择:最终会变成社会底层
快科技2月13日消息,日前,360集团创始人周鸿祎与新浪财经CEO邓庆旭对话,谈到了创业、95后00后红利等话题。周鸿祎主张要想创业
2025-02-13 08:50:00
频繁遭遇破坏与盗窃:特斯拉充电桩被迫加装“防弹衣”
快科技2月13日消息,由于充电站电缆含有可回收金属,常被窃贼盯上。因此,特斯拉面对超级充电站频繁遭受破坏的问题,被迫采取了新的防护措施
2025-02-13 08:50:00
苹果折叠屏iPhone已在路上:蓝思科技供应UTG玻璃
快科技2月13日消息,据媒体报道,中国供应商蓝思科技将为苹果折叠屏iPhone供应UTG玻璃。据悉,UTG全称Ultra-Thin Glass
2025-02-13 08:50:00
机器人 闹元宵
2月12日,由省总工会主办的元宵游园灯会在杭州文三数字生活街区举行。来自宇树科技的人形机器人G1现场表演了川剧变脸绝活,还有16只身着红色舞狮服装的机器狗表演《金蛇狂舞》。这样富
2025-02-13 08:59:00
蓝牙耳机哪个牌子的好用?这2款强势入选2025年度耳机排行榜
在现代快节奏的生活中,蓝牙耳机已经成为人们日常生活中不可或缺的电子产品。无论是在通勤途中、健身房里,还是在家中享受音乐
2025-02-13 09:00:00
浙江在线2月13日讯(记者 蒋欣如 通讯员 刘渊慧)12日,省人力社保厅发布2025年1月浙江人力资源市场热门需求排行
2025-02-13 09:20:00
造车“到底用铝还是用钢”让网友吵翻:理想高管正面回应 你认可吗
快科技2月13日消息,汽车到底用铝还是钢,这是不少用户争议话题,而理想高管也是正面回应了这个问题。理想汽车第一产品线总裁汤靖表示
2025-02-13 09:20:00
荣耀上央视!安卓阵营首款搭载DeepSeek的手机
快科技2月13日消息,日前,国内多家手机厂商、三大运营商、车企、云服务提供商等先后宣布接入国产开源大模型DeepSeek
2025-02-13 09:50:00
山东移动泰安公司完成全市首个万兆光网试点部署
鲁网2月13日讯为贯彻落实党中央、国务院关于推进万兆光网试点应用的决策部署,推动网络向超高速、智能化升级,山东移动泰安分公司于2月10日在泰安市泰山区财源居小区率先完成全市首个万兆光网试点部署
2025-02-13 09:54:00
2025年春节档,厦门电影市场以总出票近100万张、票房超4813万元的成绩,刷新历史纪录。这一数据的背后,是市民文化消费热情的释放
2025-02-13 10:01:00
把excel带入数字化时代,就用魔方网表
自1985年问世以来,Excel凭借其数据处理和分析功能,成为职场人士必备的办公工具。从最初的单机版,到局域网共享,再到线上共享表格
2025-02-13 10:01:00