• 我的订阅
  • 科技

斯坦福发布ai基础模型“透明度指标”

类别:科技 发布时间:2023-10-21 16:47:00 来源:浅语科技

10月20日消息,斯坦福大学日前发布了AI基础模型“透明度指标”,其中显示指标最高的是Meta的Lama2,但相关“透明度”也只有54%,因此研究人员认为,市面上几乎所有AI模型,都“缺乏透明度”。

据悉,这一研究是由HAI基础模型研究中心(CRFM)的负责人RishiBommasani所主导,调查了海外最流行的10款基础模型:

Meta的Llama2、BigScience的BloomZ、OpenAI的GPT-4、StabilityAI的StableDiffusion、AnthropicPBC的Claude、谷歌的PaLM2、Cohere的Command、AI21Labs的Jurassic-2、InflectionAI的Inflection、亚马逊的Titan。

RishiBommasani认为,“缺乏透明度”一直是AI行业所面临的问题,在具体模型“透明度指标”方面,IT之家发现,相关评估内容主要围绕“模型训练数据集版权”、“训练模型所用的运算资源”、“模型生成内容的可信度”、“模型自身能力”、“模型被诱导生成有害内容的风险”、“使用模型的用户隐私性”等展开,共计100项。

最终调查情况显示,Meta的Lama2以54%的透明度居冠,而OpenAI的GPT-4透明度只有48%,谷歌的PaLM2则以40%排名第五。

斯坦福发布ai基础模型“透明度指标”

▲图源斯坦福大学

在具体指标中,十大模型得分表现均“最好”的是“模型基本信息”(ModelBasics),这一评估内容主要包含“模型训练上是否准确介绍了模型的模式、规模、架构”,平均透明度为63%。表现最差的则是影响(Impact),主要评估基础模型是否会“调取用户信息进行评估”,平均透明度只有11%。

CRFM主任PercyLiang表示,商业基础模型的“透明度”对于推动AI立法,及相关产业、学术界而言,非常重要。

RishiBommasani则表示,较低的模型透明度让企业更难知道它们能否安全地依赖相关模型,也难以令研究人员依靠这些模型来做研究。

RishiBommasani最终认为,上述十大基础模型在透明度方面都“不及格”,虽然Meta的Llama2得分最高,但并不能满足外界需求,“模型透明度最少要达到82%,才能被外界认可”。

以上内容为资讯信息快照,由td.fyun.cc爬虫进行采集并收录,本站未对信息做任何修改,信息内容不代表本站立场。

快照生成时间:2023-10-21 21:45:05

本站信息快照查询为非营利公共服务,如有侵权请联系我们进行删除。

信息原文地址:

欧盟通过AI监管草案后,斯坦福研究显示:全球主流AI模型均不达标 | 最前线
...了广泛争议。如今,监管脚步正在快速迫近。6月中旬,斯坦福大学AI研究实验室发布了一项对AI大模型的研究的结果。研究以十个AI大模型为研究对象,评估他们是否达到欧盟AI法案的标
2023-06-27 16:37:00
欧盟《人工智能法案》如何影响开源模型监管?
...额总额7%的巨额罚款以较高者为准。不过,去年6月中旬,斯坦福大学AI研究实验室发布的一项研究显示,包括OpenAI的GPT-4
2024-03-16 13:06:00
要IPO了?OpenAI任命CFO
...尔玛和区块链软件公司Consensys的董事会成员,同时她也是斯坦福数字经济实验室的联席主席。此前OpenAI并未设立CFO职位
2024-06-12 14:22:00
ASML两款光刻机出口许可被撤销;比亚迪Q4纯电车销量超特斯拉
...新预测:关于AI,这些事未来十年不会变吴恩达、LeCun、斯坦福副教授、微软CTO等AI领域大咖,纷纷在新年开始时就今年AI的发展预测看法。吴恩达对AI未来十年的前瞻,强调社
2024-01-03 15:09:00
德国OpenAI加入开源大战!发布欧洲纯血版模型,曾获博世和惠普投资
...的回答。该公司在官网上发布了模型在AlpacaEval(由来自斯坦福的团队开发的大语言模型评测系统)上的评测结果: 标准版Pharia在德语
2024-08-28 09:43:00
李飞飞最新对话:我愿意被称作“AI教母”,AI不会造成“人类灭绝”
在美国当地时间周四,华裔人工智能科学家、斯坦福大学教授李飞飞现身于在旧金山举行的彭博科技峰会,与资深科技记者艾米丽·张深入探讨了人工智能的安全与伦理等热点问题。核心内容1、关于“
2024-05-11 14:10:00
本文转自:人民邮电报近日,斯坦福大学研究团队提出了一种名为DetectGPT的新方法,旨在成为首批打击高等教育中LLM生成文本的工具之一。相关研究论文已发表在预印本网站arXiv
2023-01-31 09:46:00
斯坦福AI虚拟小镇开源;英伟达再推超级芯片;OpenAI发布爬虫机器人 | 本周硅谷发生了什么?
...活跃。最火爆的话题,莫过于《西部世界》照进现实——斯坦福Smallville的「虚拟小镇」正式开源,25个人工智能体在小镇中自由生存、从事“类人”活动,引起网友的广泛讨论。另
2023-08-14 15:59:00
斯坦福AI团队抄袭国产大模型?连识别“清华简”都抄了!清华系团队发文回应
...”的回旋镖,这次扎到了美国科研团队身上。最近几天,斯坦福大学AI团队陷入抄袭风波,被质疑“套壳”清华系大模型开源成果,引起舆论哗然。起因是这个团队在5月29日发布了一个多模态
2024-06-04 14:35:00
更多关于科技的资讯:
名创优品MINISO深耕IP战略:岭南骑楼店开业首日引爆Z世代消费热潮
2025年8月17日,名创优品MINISO LAND华南首店于广州北京路步行街正式开业。该店以百年岭南骑楼为空间载体,融合超过100个全球热门IP
2025-10-09 11:15:00
荣耀Magic8系列发布会官宣定档10月15日
10月9日,荣耀官方正式宣布,主题为“开新局・见未来”的荣耀 Magic8 系列暨 Magic OS10 发布会将于10 月15日正式举行
2025-10-09 11:30:00
局部降水量80毫米以上!10—14日烟台市将有持续连阴雨天气
齐鲁晚报·齐鲁壹点 周宣刚10月7日10时,烟台市气象局发布10—14日连阴雨天气预报和大风警报。受高空槽东移和暖湿气流输送北上的水汽影响
2025-10-09 11:31:00
权威发布, 福瑞达颐莲品牌价值评估突破120亿
2025年9月25日,在中国香料香精化妆品工业协会主办的“2025中国香妆品牌价值大会”上,福瑞达生物股份旗下颐莲品牌凭借卓越的市场表现与品牌影响力
2025-10-09 11:32:00
持续创新高!高德扫街榜上线23天用户超4亿
这个国庆黄金周,高德APP和高德扫街榜正在持续创新高——10月3日,高德扫街榜宣布:上线仅23天,累计用户超4亿。10月1日
2025-10-09 11:33:00
国庆中秋,大马再掀中餐热潮!“鱼你速度”树出海标杆!
国庆中秋双节期间,马来西亚再度掀起中餐热潮!以“鱼你在一起”为代表的中餐连锁品牌,在当地各大商圈持续引爆消费热情。“6个月
2025-10-09 11:34:00
开启商超智慧储鲜,澳柯玛新品冷柜让食材更鲜活
鲁网10月9日讯当社区团购爆单时冰柜塞不下?当生鲜进货量太大冻不透?当网红雪糕因串味被迫贱卖?针对这些让商超、饭馆等用户抓狂的痛点
2025-10-09 11:40:00
鸡排哥8天假期涨粉超40万,节前已成立工作室,10月9日休息一天
10月8日,江西景德镇鸡排哥在个人社交账号发布一则视频,向全国各地来到家乡景德镇游玩和打卡买鸡排的游客表示感谢。鸡排哥表示近期天气炎热
2025-10-09 12:09:00
大疆部分产品直降千元!消费者炸锅,官方回应
10月8日,大疆在官网提前挂出“双十一”促销信息,多款产品价格直降数百至上千元。此次降价幅度较大。从几百元到几千元不等
2025-10-09 13:45:00
单日游客最高突破6.9万人次 忠县橘若·忠州渡接住“泼天流量”
这个国庆假期,重庆忠县江畔的橘若·忠州渡结结实实地“火”出了圈,八天揽客30余万人次,游客单日最高接待量突破6.9万人次
2025-10-09 13:57:00
谷子科技“智慧票根”创新亮相2025和平精英PEL运动会
10月7日,由谷子科技集团、和平精英职业联赛(PEL)与腾讯音乐娱乐集团联合出品,腾讯音乐娱乐集团与安徽易趣网络科技有限公司承办
2025-10-09 14:01:00
KPRO肯律轻食广州市场喜迎三十店庆十店同开彰显品牌活力
近日,肯德基旗下能量轻食品牌KPRO肯律轻食在广州、佛山及惠州三地,同步新开十家门店,标志着其在广州市场门店总数突破三十家
2025-10-09 14:01:00
告别失眠困扰!2025年备受瞩目的十大助眠药综合评估与选购参考
夜深人静,却辗转反侧;闹钟响起,仍昏沉乏力——这已成为当代太多人的真实写照。世界卫生组织研究表明,持续的睡眠障碍不仅是生活质量的杀手
2025-10-09 14:03:00
布鲁可携新品类、新系列、新产品亮相WF2025,全面展现\
10月2日-3日,中国规模最大、最专业的手办模型展Wonder Festival 2025(以下简称:WF2025)在上海正式开幕
2025-10-09 14:50:00
中国电信董事长柯瑞文:云网筑基,智惠未来
10月1日,全球云网宽带产业协会(World Broadband Association,简称:WBBA)云网宽带发展大会在巴西圣保罗召开
2025-10-09 15:13:00