• 我的订阅
  • 头条热搜
中国信通院发布大模型安全基准测试报告 360智脑综合排名第一
本文转自:中国新闻网近日,中国信息通信研究院发布大模型安全基准测试AI Safety Bench 2024年Q1的首轮测评报告(下称“测评报告”),结果显示,三六零集团自研的认知通用大模型360智脑综合排名第一。大模型安全基准测试AI Safet...……更多
...范能力,今年2月,中国信息通信研究院(以下简称中国信通院)联合360集团,发起大模型安全基准测试SafetyAI Bench制定工作。大模型安全基准测试秉持“公平公正、产业应用、选型参考”原则,采用科学严谨的测试方法,评估大...……更多
日前,“2024中国信通院ICT深度观察报告会”人工智能伙伴分论坛在京召开。会上,“CAICT人工智能伙伴计划”启动。未来,中国信通院将与合作伙伴紧密围绕国家重大需求,在政策研究、标准制定、开放共享、行业赋能以及国...……更多
AI安全守护计划启动!信通院牵头,AIIA安全治理委员会发布三类模型安全评测
...、安全组两个工作组,近百家单位加入,主任单位由中国信通院牵头,副主任单位包括多家知名企业和高校。其中,治理组工作围绕AI治理框架、合规治理、赋能治理展开,安全组主要开展大模型安全、合规等研究及基准测试。...……更多
...记者10日从中国信息通信研究院了解到,今年6月来,中国信通院选取多款通用大模型和医疗健康行业大模型开展效能评估工作,结果显示,通用大模型在医学知识广度方面具有一定优势,医疗健康行业大模型在特定医疗任务上表...……更多
浪潮科技作为首批成员单位加入信通院“政务大模型推进中心”
12月21日,"2024中国信通院ICT深度观察报告会政企数字化转型论坛"在北京召开。此次论坛聚焦政企数字化转型,浪潮科技作为首批成员单位受邀出席“政务大模型推进中心”成立仪式。中国信通院作为国内IT领域重要权威机构...……更多
中国信通院发布《代码大模型》标准
...,据人工智能产业发展联盟AIIA消息,2024年1月25日,中国信通院联合中国工商银行牵头发布《智能化软件工程技术和应用要求第1部分:代码大模型》标准,该标准适用于企业在代码大模型的研发、评估和验收等过程中,为代码大...……更多
...促人工智能应用以人为本,智能向善。近日,在2025中国信通院深度观察报告会主论坛上,首批17家企业正式签署《承诺》。《承诺》凝聚产业界守护人工智能安全、促进人工智能向善的基本共识,旨在共同应对技术变革带来的复...……更多
「世界开源新王」跌落神坛?重测跑分暴跌实锤造假,2人团队光速「滑跪」
...性消息——结果没多久,Reflection 70B就被打假了:公布的基准测试结果和他们的独立测试之间存在显著差异。无论是AI研究者,还是第三方评估者,都无法复现Matt Shumer所声称的结果。根据Artificial Analysis的数据,Reflection 70B在基准...……更多
...水电装备、安全应急装备等重点行业装备领域,发挥中国信通院在数字孪生、人工智能、大数据等信息技术领域的创新优势,开展基于数据科学的装备模型构建、仿真、验证等工作,致力于为产业界提供一批基于模型的装备优化...……更多
...全性方面的问题已经受到业内高度关注。今年8月,中国信通院发文称,近年来,以大模型为核心的人工智能技术飞速发展,成为数字经济增长新动能。然而,作为新质生产力的大模型在安全性方面仍存在较多缺陷,这为其大规...……更多
AI科学家太多,谁靠谱一试便知!普林斯顿新基准CORE-Bench:最强模型仅有21%准确率
【新智元导读】普林斯顿大学新发布的CORE-Bench基准测试,通过270个基于90篇跨学科科学论文的任务,可评估AI智能体在计算可重复性方面的表现,最简单任务的准确率可以达到60%,最难任务准确率仅有21%大模型的能力越来越强,...……更多
本文转自:人民网12月27日,2024人工智能赋能新型工业化大会在北京召开,中国信息通信研究院发布《人工智能治理蓝皮书(2024年)》,引发业界和学界的广泛关注。报告指出,近年来,人工智能技术颠覆性、跨越式突破引发...……更多
南京经开区举行大模型产业发展推进会
...目签约落地,“智谷杯”大模型应用创新大赛颁奖,中国信通院大模型“样板间工程”优秀案例颁证,“可信AI”大模型评估最新结果发布……南京经开区力推大模型和产业融合,不断丰富产业生态,增强产业发展韧劲,正在加...……更多
首家!数势科技通过中国信通院数据指标管理平台技术要求专项测试
2024年5月10日,在中国信息通信研究院(以下简称“中国信通院”)组织的首批数据指标管理平台技术要求专项测试中,北京数势云创科技有限公司(以下简称“数势科技”)顺利完成了数据指标管理平台技术要求专项测试的全...……更多
嘉为蓝鲸荣誉入选信通院汽车云市场图谱
...格局。历经严格的框架讨论、评估、遴选多个环节,中国信通院汽车云工作组发布了《汽车云市场图谱1.0》,全方位展示在汽车云领域处于领先地位的代表性企业。嘉为科技旗下研运解决方案品牌嘉为蓝鲸荣誉上榜云服务厂商优...……更多
突发!谷歌发布史上最强大模型Gemini,打爆GPT-4
...的高效Gemini版本(1.8B/3.25B)其中Gemini Ultra一上来就在32个基准测试中拿下30个SOTA,并且第一个在MMLU基准上达到人类专家水平。而Gemini Pro从今天起,就会在Bard中实装上线。 同时,谷歌Gemini团队还公布了一份60页的详细技术报告...……更多
迈向多语言医疗大模型:大规模预训练语料,开源模型与全面基准测试
...一款名为 MMed-Llama 3 的全新基座模型,以 8B 的尺寸在多项基准测试中超越了现有的开源模型,更加适合通过医学指令微调,适配到各种医学场景。 所有数据和代码、模型均已开源。MMedBench 上的准确率,图 d 展⽰了在 MMedC 上进...……更多
中国信通院与联想集团联合发布《中国企业智能化成熟度报告(2022)》 助力高质量发展行稳致远
...自:人民日报1月11日,中国信息通信研究院(简称“中国信通院”)与联想集团共同发布《中国企业智能化成熟度报告(2022)》(简称《报告》)。《报告》提出兼具实用性和可操作性的智能化转型方法论,致力于帮助广大企...……更多
多模态竞技场对标90B Llama 3.2!Pixtral 12B技术报告全公开
...要好。 最后,与开源模型一起,Mistral还贡献了一个开源基准测试MM-MT-Bench,用于在实际场景中评估视觉语言模型。技术细节当前的多模态大模型基本上都是:模态编码器 + 投影模块 + 大语言模型主干。如果需要多模态输出,后...……更多
代码模型自我进化超越GPT-4o蒸馏!UIUC伯克利等提出自对齐方法 | NIPS 2024
...,超过了参数量大10倍的CodeLlama-70B-Instruct。在全部的三项基准测试(代码生成、数据科学编程、代码编辑)中,SelfCodeAlign都战胜了之前最先进的指令微调方法OctoPack。此外,在HumanEval+上,SelfCodeAlign的性能超越了基于GPT-3.5……更多
苹果AI震撼上线iPhone,进化版Siri却没有ChatGPT!47页技术报告揭秘自研模型
...示了AFM-server在HuggingFace OpenLLM排行榜V1,以及HELM-Lite v1.5.0基准上的结果。可以看到,AFM预训练模型有着强大的语言和推理能力,从而为后训练和特征微调提供了坚实的基础。后训练 人类评估对于苹果AI的应用场景来说,人类评估...……更多
微软华人团队发布全新基准AGIEval,专为人类考试而生
随着语言模型的能力越来越强,现有的这些评估基准实在有点小儿科了,有些任务的性能都甩了人类一截。通用人工智能(AGI)的一个重要特点是模型具有处理人类水平任务的泛化能力,而依赖于人工数据集的传统基准测试并...……更多
自动化、可复现,基于大语言模型群体智能的多维评估基准
...)也越来越强。因此,在多样的应用场景中对其进行性能基准测试已成为了一项重大挑战。目前最受欢迎的基准测试是 Chatbot Arena,它通过收集用户对模型输出的偏好来对 LLM 进行综合排名。然而,随着 LLM 逐渐落地于众多应用场...……更多
2023 AI现状报告:GPT-4仍最强,监管方向缺乏全球共识
...变得更加强大和灵活,比较它们的能力越来越困难。由于基准变得不那么明确,用于评估大语言模型的“基于氛围”的方法在业界越来越普遍。·人工智能安全在2023年首次占据舞台中心。但人工智能界内部存在深刻分歧,世界各...……更多
OpenAI o1 模型 PlanBench 规划能力实测:准确率 97.8%
... 日消息,来自亚利桑那州立大学的科研团队利用 PlanBench 基准,测试了 OpenAI o1 模型的规划能力。研究结果表明 o1 模型取得了长足的进步,但仍然存在很大的局限性。PlanBench 基准简介PlanBench 开发于 2022 年,用于评估人工智能系...……更多
联想与信通院发企业智能化成熟度报告:中国企业智能化转型进入深水区
1月12日消息,近日,联想集团联合中国信息通信研究院发布业内首份《中国企业智能化成熟度报告(2022)》,《报告》指出中国企业智能化转型已经进入“深水区”。资料图在汲取业界已有理论研究成果,对比参考政府、行业...……更多
LLM仍然不能规划,刷屏的OpenAI o1远未达到饱和
...史记录。o1 模型拥有真正的通用推理能力。在一系列高难基准测试中展现出了超强实力,相比 GPT-4o 有巨大提升,让大模型的上限从「没法看」直接上升到优秀水平,不专门训练直接数学奥赛金牌,甚至能在博士级别的科学问答...……更多
2024数据智能大会在北京召开
...坛及数据资源估值与入表闭门研讨会,大会主论坛由中国信通院云计算与大数据研究所大数据与智能化部主任姜春宇主持,并邀请了来自金融、通信、信息技术、航空、健康科技、大数据等多个领域的近千位专家、代表现场参会...……更多
...转自:中国电力报贾博本报讯 (贾博)4月7日,国网宁夏信通公司数据运营平台完成设备全过程贯通各类作业任务全链路、全环节监控场景构建,标志着宁夏电力设备全过程贯通全链路联调测试工作全面完成,为核心设备各环节...……更多
更多关于科技的资讯:
英特尔酷睿Ultra 200HX/H系列技术解析:超强能效实现150W暴力输出
太平洋时间1月6日上午,英特尔举办了CES 2025展前发布会,全新的英特尔酷睿Ultra 200HX/H系列移动级处理器正式发布
2025-01-08 21:19:00
别克GL8最强对手登场!比亚迪全新MPV夏正式上市:24.98万起
快科技1月8日消息,今日晚间,比亚迪全新中大型MPV夏正式上市,共推出4款车型,售价24.98-30.98万元。新车全系标配“天神之眼”DiPilot 100高阶智驾辅助系统
2025-01-08 21:19:00
中大型智能旗舰MPV又一猛将!一图看懂比亚迪夏
快科技1月8日消息,作为王朝网的首款旗舰MPV车型配置丰富,外观设计基于王朝网设计语言,预热已久,造型获好评。内饰方面
2025-01-08 21:19:00
抖音电商严打违法违规营销!严重违规主播永封带货权限
快科技1月8日消息,今日,抖音电商发布关于保障消费者权益,严打违法违规营销行为的公告。公告提到,为创造公平健康的交易环境
2025-01-08 21:19:00
芝奇达成48GB DDR5-10600!AMD锐龙平台突破10GHz
快科技1月8日消息,芝奇宣布,在AMD锐龙平台上,成功将内存超频到了DDR5-10600的超高速度,突破10GHz大关
2025-01-08 22:49:00
丰田董事长谈日产本田合并:期待他们造出更具竞争力的产品
快科技1月8日消息,丰田汽车董事长丰田章男在CES 2025展览会上谈到了日本两大车企本田、日产面临的合并问题。丰田章男表示
2025-01-08 22:49:00
最美CTO携保定神车亮相 中国智能车扎堆拉斯维加斯
保定智能车勇闯拉斯维加斯,首次亮相“科技春晚”。2025元旦刚过,长城CTO吴会肖从保定出发,途经北京、仁川,几经辗转
2025-01-08 22:49:00
用户期待已久!HDMI 2.2规范来了:带宽暴增
2025年1月6日,美国拉斯维加斯—HDMI Forum,Inc.宣布HDMI规范2.2版本,新HDMI规范为规模庞大的HDMI生态系统带来更多选择
2025-01-08 23:19:00
Switch 2大量情报泄露!配件商自曝:黑市能买到真机吗
虽然任天堂并未参展CES 2025拉斯维加斯消费电子展,但展会上却处处透露着Switch 2即将发布的信息。多家配件厂商纷纷展示了他们为这款新主机准备的首批配件
2025-01-08 23:49:00
印尼维持iPhone 16销售禁令 前一天刚批准建设AirTag工厂
据媒体报道,印度尼西亚维持了对苹果iPhone 16的销售禁令,称苹果承诺的、包括AirTag工厂在内的10亿美元投资计划仍不足以满足当地的投资要求
2025-01-08 23:49:00
腊八节腾讯给员工发巨型甘蔗:员工扛到一楼去削皮
快科技1月8日消息,据媒体报道,1月7日是腊八节,在节日当天,腾讯公司给员工准备了惊喜—巨型甘蔗,祝员工“掂过碌蔗”,寓意今年顺顺利利
2025-01-08 23:49:00
男子4s店花320万订劳斯莱斯库里南 结果车款被4S店挪用无法提车
快科技1月8日消息,据报道,湖南长沙,游先生向媒体反馈称,自己花费320万元订购库里南,结果购车款被4S店挪用,现在仍无法提车
2025-01-09 00:19:00
2025年首次更新!微信安卓版8.0.56正式发布:朋友圈视频支持倍速播放、新增语音倒计时
快科技1月9日消息,日前,微信安卓版迎来8.0.56正式版更新,这是2025年首次版本更新。关于更新内容,依然是那9个字
2025-01-09 00:19:00
千呼万唤!《王者荣耀》今日开启华为HarmonyOS NEXT限量付费删档测试
快科技1月9日消息,今日,腾讯旗下热门手游《王者荣耀》将开启华为HarmonyOS NEXT版本的限量付费删档测试。本次测试限量开放
2025-01-09 00:49:00
Apple Watch芯片首次在美国生产:台积电代工
快科技1月9日消息,据媒体报道,苹果扩大了在美国生产芯片的规模,Apple Watch Series 9使用的S9芯片将在台积电亚利桑那州凤凰城Fab 21工厂生产
2025-01-09 00:49:00