• 我的订阅
  • 头条热搜
自动化、可复现,基于大语言模型群体智能的多维评估基准
...群智慧)来实现更稳健且更少偏见的评估,同时使该过程自动化且可扩展到多维度能力比较,Maitrix.org 发布了 Decentralized Arena。原文地址: https://de-arena.maitrix.org Leaderboards: https://huggingface……更多
87.8%准确率赶超GPT-4o登顶!谷歌DeepMind发布自动评估模型FLAMe
...实现更佳的性能。 自动评估方法为了将人工评估的流程自动化,作者对LLM任务和评估标准进行了细致的定义。数据收集和领域内很多科技巨头的做法形成鲜明对比的是,DeepMind这篇论文不仅披露了使用的数据集列表,而且从数...……更多
下载次数破39万!CMU、Meta联合发布VQAScore文生图优化方案:Imagen3已采用
...ImageReward和HPSv2等。然而,这些指标真的足够好吗?现有自动化指标的不足在评估两张图片的相似性(similarity)时,传统指标LPIPS等方法依靠预训练的图像编码器,将图像特征嵌入后再计算距离。然而,这类方法只能评估图像与...……更多
「学术版ChatGPT」登场!Ai2打造科研效率神器OpenScholar,让LLM帮你搞定文献综述
...,性能可以优于专有系统,甚至媲美人类专家。为了方便自动化评估,团队还一道推出了全新的大规模基准ScholarQABench,覆盖了CS、生物、物理等多个学科,用于评价模型在引用准确性、涵盖度和质量的等方面的表现。由UWNLP和Ai2...……更多
媲美OpenAI事实性基准,这个中文评测集让o1-preview刚刚及格
...严格且周密的流程,确保数据质量达到高标准。主要分为自动化构建和质量控制两个阶段:1. 自动化构建阶段,主要包括五个步骤:(1)知识内容提取与过滤:我们从维基百科等多种知识领域中收集大量富含知识的文本内容,...……更多
限定120分钟科研挑战,o1和Claude表现超越人类
...由非营利研究机构METR推出,目的是搞清:当前AI智能体在自动化科研方面有多接近人类专家水平。注意看,一声令下之后,AI和50多位人类专家开始暗自较劲:前2小时,基于Claude 3.5 Sonnet和o1-preview构建的Agent(智能体)表现远超...……更多
安全强化学习方法、理论与应用综述,慕工大、同济等深度解析
...确保机器人在与人类交互或执行任务时的安全性。 工业自动化:在自动化生产线中,利用安全强化学习优化生产过程,同时避免事故发生。 能源管理:在电网操作中应用安全强化学习,以优化能源分配,防止系统超载。未来挑...……更多
平安保险核保依托AI自主学习,扩展多维立体评估
...核保风控的健康循环,通过数据收集和分析,风险评估模型,自动化决策系统,保险公司不断改进核保流程和决策模型,以适应市场变化和新的风险挑战。传统的核保流程通常依赖于核保员的经验和业务规则,这种方式存在着一定的局限...……更多
AI科学家太多,谁靠谱一试便知!普林斯顿新基准CORE-Bench:最强模型仅有21%准确率
...级别的任务上达到了21%的准确率,即模型在常规科学任务自动化方面仍然有很大的改进空间。CORE-Bench 基准构造验证可重复性需要深度专业的领域知识,即使是对于经验丰富的研究人员来说,其过程可能也算是劳动密集型的任务...……更多
商汤又“夺金”!SuperCLUE-V多模态大模型基准发布10月榜单
...内外最具代表性的11个开源/闭源多模态理解大模型,聚焦多维度能力评估,包括基础能力和应用能力两个大方向,以开放式问题形式对多模态大模型进行评估,涵盖了8个一级维度30个二级维度。报告称SenseChat-Vision 5.5在基础能力-...……更多
田渊栋团队新作祭出Agent-as-a-Judge!AI智能体自我审判,成本暴跌97%
...,大模型、智能体、人类作为评判者的示意图。 DevAI:自动化AI开发数据集另外,在代码生成领域,基准测试的发展也落后于智能体系统的快速进步。比如,HumanEval仅关注算法问题,而MBPP则处理简单的编程任务,但这两者都没...……更多
LLM数学性能暴涨168%,微软14人团队力作!合成数据2.0秘诀曝光,智能体生成教学
...生成新的提示和响应。它们还可以实现数据生成工作流的自动化,减少或消除某些任务对人工干预的需求。论文中,作者提出了「生成式教学」的概念。这是说,使用合成数据进行后训练,特别是通过强大的模型创建数据,来教...……更多
全球首篇!调研近400篇文献,鹏城实验室&中大深度解析具身智能
...:(1)固定基座型机器人,如机械臂,常应用在实验室自动化合成、教育、工业等领域中;(2)轮式机器人,因高效的机动性而闻名,广泛应用于物流、仓储和安全检查;(3)履带机器人,具有强大的越野能力和机动性,在农...……更多
NeurIPS | 消除多对多问题,清华大规模细粒度视频片段标注新范式
...难以应对细粒度查询。为此,来自清华大学的研究者提出自动化视频 - 文本细粒度标注系统 VERIFIED,并基于此系统构建新的细粒度 VCMR 基准数据集(Charades-FIG、DiDeMo-FIG 和 ActivityNet-FIG),以推动细粒度视频理解的发展。论文题目...……更多
​首个自主机器学习AI工程师,刚问世就秒了o1,Kaggle大师拿到饱
多智能体系统,可自动化整个 ML 工作流程,节省数千小时工时。Open AI 的推理模型 o1,这么快就被比下去了?本周五,AI 社区见证了又一项突破:一个完全自动化机器学习流程的 AI 工程师,能轻松获得 Kaggle 大师水平,在参与...……更多
还在人工炼丹?自动提示工程指南来了,还带从头实现
...多个不同的提示词并对其进行测试,只不过是让整个过程自动化。后面我们会看到,这个过程非常类似于传统监督式机器学习中的自动超参数优化。本文将深度介绍 APE:首先将介绍原理、一些可用于生成提示词的策略以及其它...……更多
自动化机器学习研究MLR-Copilot:利用大型语言模型进行研究加速
...决当前研究中的具体问题。为此,我们提出了 MLR-Copilot 自动化机器学习研究的研究平台 / 演示工具 (Demonstration),利用大型语言模型(LLM)作为研究人员的 “副驾驶”,分析研究论文、提取研究问题,以提出新的研究思路和实验...……更多
Claude 3.5深夜觉醒,学会模仿人类用电脑!编程干翻o1,Agent一夜变天
...模型均取得了实质性进步The Browser Company:在使用该模型自动化网络工作流程时发现,Claude 3.5 Sonnet的表现超越了他们此前测试过的所有模型此外,在安全部署前,Claude 3.5 Sonnet已经在美国AI安全研究所(US AISI)和英国安全研究所...……更多
智能体首达Kaggle Grandmaster,华为结构化推理补齐思维链短板
...识,从而解决各种复杂问题。这需要系统级的方法,需要自动化和优化来适应具体的任务目标。举个例子,在 Kaggle 数据科学竞赛中(如图 1 所示),数据科学家需要遵循一个结构化的工作流程:收集、清理、预处理和标准化数...……更多
数字员工、超级个体、具身智能,AI Agent未来发展十大研究方向
...带来重大机遇。报告认为,随着人工智能向智能体演进,自动化系统将能够自主决策和行动。智能体不仅会为人类提供建议,还将代表人类采取行动。人工智能将继续生成文本、图像和洞察,而AI Agent将自行决定如何处理这些信...……更多
“具身智能小镇”来了!机器人逛超市买菜满街跑,来自上海AI Lab
...月,该团队还发布了具身多模态大模型Grounded 3D-LLM,能够自动化生成物体到局部区域的场景描述与具身对话数据,有效缓解了目前三维场景理解的局限性。论文地址:https://arxiv.org/abs/2407.10943GitHub地址:https://github.com/open……更多
最癫OpenAI爆料者竟是AI智能体??CEO出来认领,网友炸锅
...元先来说说MultiOn AI这家公司,专注于构建AI智能体。旨在自动化日常任务和操作网页,例如从电商平台买手纸或安排日程表。今年6月,有消息称MultiOn将完成2000万美元(约1.4亿元)融资,估值约1亿美元(约7.1亿元)。创始人Div G...……更多
科学家研发AI睡眠模型,捕捉多导睡眠图数据特征,提升睡眠障碍
...为睡眠医疗提供降本增效的可能。与此同时,这种高效的自动化睡眠分析系统,也有望成为传统多导睡眠图人工手动标注的替代或补充。 预计基于本次开发的深度学习睡眠分析算法,有望应用于以下几个方面:其一,充当临床...……更多
谷歌版贾维斯即将问世,最强Gemini 2.0加持!AI自主操控电脑时代来临
...歌正开发同类新项目「Project Jarvis」,能将Chrome网页任务自动化。谷歌「贾维斯」将由未来版Gemini 2.0驱动,预计在12月亮相。起这个名字,是为了向钢铁侠中的J.A.R.V.I.S致敬。无独有偶,微软团队悄悄放出的OmniParser,也在笃定AI...……更多
...每轮30万次的迭代训练,模拟设计师创作过程,实现高效自动化设计,大幅提升设计效率,降低成本至原来20%,解决设计师人才稀缺、成本高问题,推动蕾丝花型设计领域的智能化革新。8、基于大数据驱动的陶瓷产业数字化协同...……更多
在 OpenAI 公布的技术论文里,竟然藏着九大隐秘的线索!
...何给人类加buff,但GPT-4或后续模型可能会导致某些工作的自动化。OpenAI这段话背后想传达的点比较明显,就是我们经常提到的“科技是把双刃剑”。博主找了相当多的证据表明,像ChatGPT、GitHubCopilot这些AI工具,确确实实地提高...……更多
江苏银行:聚数智之力,塑“微贷”之美
...、申请提交等操作步骤。客户在提交业务后,可快速获取自动化审批结果,并可通过江苏银行手机银行等渠道实现在线用款,按需用信、随借随还。目前,“微e融”产品实现全流程线上化办理,客户足不出户便可享受“一站式...……更多
从“智能涌现”到“超人类”,通往AGI巅峰的终极设想
...战。6.关注实现AGI的路径,而非单一终点:正如通过一套自动化驾驶的标准体系会更有助于针对自动驾驶车辆相关的政策制定和进程推进一样,定义AGI在不同“水平”上的衡量标准是很有益的。AGI的发展就像是一次长途跋涉,终...……更多
谷歌 AI 推出 CardBench 评估框架
...之家 9 月 3 日消息,谷歌 AI 研究人员最新推出了 CardBench 基准,主要为学习型基数估计(cardinality estimation)满足系统评估框架需求。CardBench 基准是个综合评估框架,包含 20 个不同真实数据库中的数千次查询,大大超过了以往的...……更多
调研219篇文献,全面了解GenAI在自适应系统中的现状与研究路线图
...复问题或提升性能。现有研究多利用 LLMs 进行漏洞修复和自动化程序修复,但自适应系统中的自动化进化研究有限。LLMs 可以通过集体智能(如 metaGPT 自动化开发流程)以及自主学习(学习新技能以应对运行时的变化)实现自我...……更多
更多关于科技的资讯:
华为与支付宝联合优化,Mate 70“碰一下支付”比其他手机更快
11 月 26 日消息,备受关注的华为新机 Mate 70 和 Mate X6 今日已正式发布,据华为在发布上介绍,基于 HarmonyOS NEXT 原生系统和支付宝联合优化
2024-11-28 14:12:00
LG向vivo出售46项美国标准专利 已退出手机业务多年
从韩媒获悉,继中国的OPPO和TCL王牌电器之后,LG电子又将其美国标准专利出售给了vivo。LG电子在2021年退出手机业务后
2024-11-28 14:12:00
北斗定位技术助力智慧管理,提升人员管理效率
北斗定位技术在人员智慧管理场景中的应用主要体现在以下几个方面:• 实时定位追踪与安全管理:• 北斗定位技术可以实时追踪人员位置
2024-11-28 14:13:00
品质前行!怪兽充电以实力保障驱动品牌前行
在科技飞速发展的今天,智能手机已经成为人们生活中不可或缺的一部分。然而,手机电量不足的问题也时常困扰着人们。正是在这样的背景下
2024-11-28 14:14:00
多功能数字罗盘的陀螺仪:0.4°/hr
罗盘作为导航的重要工具,已经存在很多年了,它的历史能追溯到上古时期,随着各个时代技术的发展罗盘的样式不断改变,到如今罗盘已经发展成多功能数字罗盘
2024-11-28 14:14:00
NAS市场迎来“黄金发展期”,绿联科技锁定个人用户需求
近些年来,由于云计算、人工智能等技术为NAS行业注入新活力、数据价值的不断提升以及国人数据存储需求的提高,NAS市场也迎来了一个“黄金发展期”
2024-11-28 14:14:00
AI眼镜革新潮流,YSO131LR晶振助力技术飞跃
近期,随着科技巨头们纷纷发布新款AI眼镜,这一领域再次成为公众和媒体关注的焦点。AI眼镜不仅以其独特的设计理念和前沿的技术应用吸引了大量关注
2024-11-28 14:14:00
瑞萨携多款先进解决方案再次亮相进博会
在近期盛大开幕的第七届中国国际进口博览会(简称:进博会)上,全球半导体解决方案供应商瑞萨电子携多款面向智能工业、物联网
2024-11-28 14:15:00
华为Mate 70系列实测:全新通信技术让网速翻倍,体验如何?
华为最新旗舰Mate 70系列手机于昨日震撼发布,成为科技界关注的焦点。发布会上,华为消费者业务CEO余承东对Mate 70系列的通信技术大加赞赏
2024-11-28 14:15:00
9800X3D轻松拿捏4K畅玩黑神话:悟空,AMD平台最佳游戏配置推荐
在游戏的世界里,追求极致的画面与流畅的体验一直是玩家们的不懈追求。如今,随着游戏技术的不断进步,像《黑神话:悟空》这样的大作更是对电脑配置提出了极高的要求
2024-11-28 14:15:00
地质勘探新篇章:顶坚单北斗定位手持终端提升野外作业效率
地质勘探是一项复杂而艰巨的任务,传统方式往往依赖于人工勘探和地面设备,但这种方式在野外作业时面临诸多挑战,如地形复杂、天气多变
2024-11-28 14:16:00
顶佳医疗成功举办《互联网+智慧居家养老系统技术规范》研讨会,加速行业标准化步伐
11月21日,深圳市顶佳医疗科技有限公司携手中国国际科技促进会标准化工作委员会及广东中正标准技术服务有限公司,在顶佳工业园隆重举行《互联网+智慧居家养老系统技术规范》团体标准研讨会
2024-11-28 14:18:00
阿里云宣布进一步加大香港市场的云基础设施建设投入
IT之家 11 月 28 日消息,阿里云于 11 月 27 日宣布推出“香港科技创未来”计划,将进一步加大香港市场的云基础设施建设投入
2024-11-28 14:18:00
西安小程序开发软件公司,多年研发经验服务有保障
西安小程序开发软件公司,有的公司想要做一款自己的微信小程序,因为现在移动端的流量已经大于PC端了,人们使用手机的越来越频繁
2024-11-28 14:18:00
马斯克做人类增强梦更近一步:脑机接口突破来了!
2024-11-27 15:00:18 作者:姚立伟近日,马斯克创办的脑机接口(BCI)公司Neuralink宣布已获得批准启动一项新的可行性研究
2024-11-28 14:21:00