• 我的订阅
  • 头条热搜
上海人工智能实验室公布首个ai高考全卷评测结果
...20日消息,上海人工智能实验室19日公布了首个AI高考全卷评测结果。据介绍,2024年全国高考甫一结束,该实验室旗下司南评测体系OpenCompass选取6个开源模型及GPT-4o进行高考“语数外”全卷能力测试。评测采用全国新课标I卷,参...……更多
首个AI高考全卷评测结果发布:最高分303,数学全不及格
...能力测试。6月19日, OpenCompass发布了首个大模型高考全卷评测结果。语数外三科加起来的满分为420分,此次高考测试结果显示,阿里通义千问2-72B排名第一,为303分,OpenAI的GPT-4o排名第二,得分296分,上海人工智能实验室的书生...……更多
首个AI高考全卷评测结果发布:数学全都不及格
6月19日,上海人工智能实验室发布首个AI高考全卷评测结果,月初开源的阿里通义千问大模型Qwen2-72B排名第一,在语数外三科420分的满分中获得303分,OpenAI的GPT-4o和上海人工智能实验室的书生·浦语2.0文曲星(InternLM2-20B-WQX)排...……更多
国内首个官方“大模型标准符合性评测”公布
...方公众号,在12月22日的全国信息技术标准化技术委员会人工智能分委会全体会议期间,国内首个官方“大模型标准符合性评测”结果公布,腾讯混元大模型、阿里通义千问等大模型成为首批通过评测的四款国产大模型的其中之...……更多
智源评测体系发布 国内外“百模”评估结果出炉
...140余个开源和商业闭源的语言及多模态大模型全方位能力评测结果。本次智源评测,分别从主观、客观两个维度考察了语言模型的简单理解、知识运用、推理能力、数学能力、代码能力、任务解决、安全与价值观七大能力;针对...……更多
...技术生态、产业生态和开放性等多个维度进行评估,确保评测结果客观真实。此次评测结果将形成针对特定应用场景的综合报告和产品推荐目录,为政府、企业和研究机构建设智算中心提供芯片选型的重要参考和决策依据。在评...……更多
...考语、数、外全卷能力测试。据OpenCompass于6月19日发布的评测结果,大模型的语文、英语考试水平还不错,但数学都不及格,最高分只有75分(满分150分)。参加OpenCompass此次高考测试的大模型,分别是来自阿里巴巴、零一万物、...……更多
击败Gemini-1.5-Pro、GPT-4V,从容大模型多模态能力跻身全球前三
...平台 OpenCompass 的多模态评测领域中取得重大进展。最新评测结果显示,云从科技的从容大模型在该体系中的平均得分为 65.5,这一成绩使得从容大模型跻身全球前三,超越了谷歌的 Gemini-1.5-Pro 和 GPT-4v,仅次于 GPT-4o(69.9)和 Clau...……更多
迈向多语言医疗大模型:大规模预训练语料,开源模型与全面基准测试
...或者联系报道。本文的主要作者来自上海交通大学和上海人工智能实验室智慧医疗联合团队,共同第一作者为上海交通大学博士生邱芃铖和吴超逸,共同通讯作者为上海交通大学人工智能学院王延峰教授和谢伟迪副教授,这是该...……更多
用AI来做全国高考试卷,真的有人试了!结果:成绩偏科很严重
...代替学生去高考,会怎么样?欸,还真的有人试了。上海人工智能实验室近日公布了司南评测体系OpenCompass选取开源大模型测试今年高考的全国新课标I卷“语数外”的结果,为了确保“闭卷”考试,大模型的开源时间早于高考,...……更多
云从科技从容大模型荣登中国大模型第一梯队
...台OpenCompass的多模态评测领域中也取得了重大进展。最新评测结果显示,从容大模型在该体系中的平均得分为65.5,这一成绩使其跻身全球前三,超越了谷歌的Gemini-1.5-Pro和GPT-4v,仅次于GPT-4o(69.9)和Claude3.5-Sonnet(67.9)。在国内...……更多
媲美OpenAI事实性基准,这个中文评测集让o1-preview刚刚及格
...特定需求的模型。目前 o1-preview 模型表现最为全面,但是评测结果展示了许多其他模型在特定垂直领域的强有力的表现(具体详见论文和榜单)。最后,欢迎广大研究者使用我们的评测集进行实验和研究。淘天集团算法技术 - 未...……更多
当技术越来越智能,我们如何守护安全?
...数字取证、异常检测技术的关注,到最近3年又扩展到了人工智能、深度学习和隐私保护的相关的技术上。“随着人工智能的发展,我们已经很重视相关的安全问题,比如像人工智能算法可能会在对抗攻击的情况下被误导。”清...……更多
大模型像“文科生”?业内人士在沪“论战”
...型自我学习和迭代能力还不足,计算效率还不高。不管是人工智能整体发展,还是大模型具体“升级”,业内人士适逢人工智能时代,看到的希望重重,遇到的挑战也重重。另外,在罗璇看来,人工智能的未来总体方向是通用的...……更多
云从科技:大模型五虎与AI智能体的领航者
...型的步伐。 此外,在综合评测权威平台OpenCompass公布的评测结果显示,云从科技的从容大模型在该体系中的平均得分为65.5,这一成绩使得从容大模型跻身全球前三,超越了谷歌的Gemini-1.5-Pro和GPT-4v,仅次于GPT-4o(69.9)和Claude3.5-...……更多
全模态对齐框架align-anything来啦:实现跨模态指令跟随
...目由北京大学对齐小组开发并进行长期维护,团队专注于人工智能系统的安全交互与价值对齐,指导老师为北京大学人工智能研究院杨耀东助理教授。核心成员包括吉嘉铭、周嘉懿、邱天异、陈博远、王恺乐、洪东海、楼翰涛、...……更多
人工智能的偏见——基于全球大语言模型情商与智商偏见测试
...及百川模型。本次测试提供了一个有趣的视角来观察当前人工智能大模型的发展状况。偏见测试结果得分以绝对值形式呈现,旨在凸显不同大语言模型在性别视角下处理问题的偏见程度,也揭示了它们在不同领域的优势和不足。...……更多
中关村科金1+N新品系列亮相,为企业打造大模型强人工智能应用
本文转自:新华网作为人工智能领域最重要的突破性进展之一,大模型正日益成为推动全球科技进步和经济增长的强劲动力。11月23日,在由中关村科金与中国信息通信研究院人工智能研究中心、人工智能关键技术和应用评测工...……更多
“整活”保险业务,AI大模型哪家强?
...的AI大模型能否完美“适配”保险行业?10月10日发布的《人工智能大模型保险行业应用评测报告》(以下简称《报告》)便揭晓了答案。根据《报告》,10个主流大模型在知识问答领域表现普遍较好,在智能核保、智能理赔、话...……更多
昆仑万维发布开源13B高质量商用大模型 领先Llama2和Baichuan2
...社区发展提供最佳技术支持,降低大模型商业门槛,推动人工智能技术落地千行百业,为人工智能生态建设添砖加瓦,携手开源社区探索未知世界、创造美好未来。两大模型 领先行业昆仑万维「天工」Skywork-13B系列包括两大模型...……更多
AI安全守护计划启动!信通院牵头,AIIA安全治理委员会发布三类模型安全评测
...情况,并启动了AI安全守护计划,发布了三大类别的安全评测结果。AIIA安全治理委员会成立于2023年12月底,经过半年运营,现有治理组、安全组两个工作组,近百家单位加入,主任单位由中国信通院牵头,副主任单位包括多家知...……更多
AI潮起 共筑数智之基
...0+项评测指标、200+项评测场景、100多万专属评测数据集,评测结果客观性跻身国内外主流基准第一阵营。依托自研大模型评测智能体,支持评测数据自学习、用例自编排、执行自适应,同比评测周期缩短90%以上,已服务政府部委...……更多
AI大模型“国标”首批测试结果公布,人工智能成市场新焦点
...大模型首批通过测试。测试结果称,上述四款模型符合《人工智能大规模预训练模型第2部分:评测指标与方法》语言大模型的相关技术要求,通用性、智能性等维度达到国家相关标准。该测试由工信部中国电子技术标准化研究...……更多
Bengio团队提出多模态新基准,直指Claude 3.5和GPT-4o弱点
...一致时,就会推翻 “假设”,重新尝试新的假设。 人类评测结果人类在 VCR 任务下的水平如何呢?下图中展示了母语者或各语言的流利使用者在英 / 中两种语言的简单 / 困难设定下的准确度:如果考虑包含时间、地名、人名的...……更多
中国信通院发布大模型安全基准测试报告 360智脑综合排名第一
...安全基准测试AI Safety Bench是中国信息通信研究院依托中国人工智能产业发展联盟(AIIA)安全治理委员会,联合17家单位发起的,秉持公平公正、产业应用和场景导向的原则,目标建立业内权威大模型安全中文基准测试体系。以提高...……更多
清华郑纬民院士:AI for Science的出现,让高性能计算与AI的融合成为刚需|MEET2023
...玩笑说法,但实际上也是一种趋势。除此之外,他还谈到人工智能计算机设计的三大平衡性原则、AI基准设计四大目标以及如何通过并行方法加速大规模预训练模型。为了完整体现郑纬民院士的分享及思考,在不改变原意的基础...……更多
...。经过微调的对话模型进行了客观、自动化的能力评测,评测结果显示,总分上Tele-FLM完成了对GPT-3.5-Turbo的超越。在分项得分中,Tele-FLM在总共的11个分项中有十项达到或超过GPT-3.5-Turbo水平。仅今年,中国电信人工智能研究院便...……更多
中科大/华为诺亚出手!芯片性能≠布局评分,EDA设计框架全面开源
...专家先验知识。因此,许多设计自动化方法,尤其是基于人工智能的算法,被开发出来以实现这一过程的自动化。 然而,由于芯片设计的工作流程较长,对这些算法的评估通常集中在易于计算的中间代理指标上(例如半周长线...……更多
融资超25亿元,他们的目标和OpenAI很像
...大模型的元年不是2023年,而是2020年。因为2020年6月美国人工智能研究公司OpenAI发布了GPT-3(生成式预训练模型),曾被业界认为是当时的技术巅峰之作。 “2015年成立的OpenAI最开始是一家人工智能研究实验室,主要关注强化学习...……更多
...领域中的未知问题,加速天文发现。“传统天文研究亟需人工智能技术赋能,以突破天文数据处理困境。”国家天文台台长、党委副书记刘继峰说,“天文学界常说‘以天之语,解物之道’,但‘天籁之声’非常嘈杂,信息量巨...……更多
更多关于科技的资讯:
网红吃宵夜晕倒:昏迷8个月去世
12月21日消息,据媒体报道,广东45岁网红麦友煊因病于12月20日离世。据了解,4月13日凌晨,麦友煊吃宵夜突发意外昏迷不醒
2024-12-22 00:02:00
山灵m0s便携无损音乐播放器发布, 24日开售
12月20日消息,山灵官方今日发布M0s便携无损音乐播放器,将于12月24日开售,首发价528元。山灵M0s搭载一块1
2024-12-22 00:11:00
丰田凯美瑞光辉版上市,提供两款不同配置
12月21日消息,广汽丰田凯美瑞光辉版轿车今日正式上市,新车提供两款不同配置,官方指导价分别为 20.28万元和 21
2024-12-22 00:22:00
毛不易冬至送广州一场雪:现场歌迷被震撼到了
12月22日消息,据媒体报道,毛不易在三巡广州站现场演唱《东北民谣》时送了广州一场雪,场馆内飘起了漫天雪花。毛不易表示
2024-12-22 00:32:00
北京星际智造大直径搅拌摩擦焊贮箱成功下线
12月21日消息,北京星际智造科技有限公司官方公众号昨日(12月20日)发布博文,宣布在北京市大兴区,成功下线大直径搅拌摩擦焊贮箱
2024-12-22 00:33:00
特斯拉透露cybertruck隐藏的“彩蛋”设计
12月21日消息,特斯拉Cybertruck赛博皮卡越野车的首席工程师WesMorrill透露,Cybertruck中存在一项隐藏的“彩蛋”设计
2024-12-22 00:36:00
epic2024年假日促销将送16款神秘游戏
12月20日消息,Epic2024年假日促销期间总共将送出16款神秘游戏,《吸血鬼幸存者》现在仍可领取。12月21日0时起
2024-12-22 00:50:00
openkylin2.0sp1发布:内核稳固升级
12月20日消息,OpenAtomopenKylin(以下简称“openKylin”)2.0SP1版本今日正式发布。据介绍
2024-12-22 01:03:00
华硕rog各系列新品sku参数曝光
12月20日消息,爆料者@Huang514613发现华硕ROG多款机型已经在印度、欧洲和英国经销商处上架,他特地整理了ROG各系列新品sku的参数信息
2024-12-22 01:09:00
《双人成行》新作《双影奇境》开启预购
12月21日消息,据Steam商店页面显示,《双人成行》团队新作《SplitFiction》中文名定名为《双影奇境》,游戏现已开启预购
2024-12-22 01:12:00
AT&T计划到2029年底劝说全美国的用户告别固定电话
12月21日消息,据彭博社周五晚间报道,AT&T计划到2029年底劝说全美国的用户告别固定电话。为了实现这一目标
2024-12-22 01:20:00
国产修仙游戏《鬼谷八荒》登陆ios平台
12月21日消息,国产修仙游戏《鬼谷八荒》手游版本现已在移动平台发售,登陆安卓(TapTap)和iOS平台,采用本体买断+DLC付费形式
2024-12-22 01:21:00
小鹏汽车宣布在澳洲首家汽车门店开业
12月21日消息,据小鹏汽车官方微博,小鹏汽车宣布其在澳洲(澳大利亚)的首家汽车门店正式开业,现场主要展示了小鹏G6SUV车型及小鹏飞行汽车
2024-12-22 01:24:00
《暗喻幻想:refantazio》被评为2024年最佳游戏
12月21日消息,IGN在本周五深夜宣布将2024年度最佳游戏的称号授予《暗喻幻想:ReFantazio》。IT之家附官方评语大意如下
2024-12-22 01:35:00
英特尔最新款酷睿ultra9285k性能表现平平
12月20日消息,英特尔最新款酷睿Ultra9285K由于性能表现平平而备受吐槽,但测试结果显示这其中有部分原因在于Windows的适配不达标
2024-12-22 01:51:00