• 我的订阅
  • 科技

研究人员研发出能听懂英语指令并执行家务的机器人

类别:科技 发布时间:2023-05-15 06:57:00 来源:浅语科技

普林斯顿大学、斯坦福大学和谷歌的一组研究人员,利用OpenAI的GPT-3Davinci模型,研发出了一款能听懂英语指令并执行家务的机器人,名为TidyBot。这款机器人可以根据用户的喜好,自动完成如分类洗衣服、捡起地上的垃圾、收拾玩具等任务。

研究人员研发出能听懂英语指令并执行家务的机器人

GPT-3Davinci模型是一种深度学习模型,属于GPT模型系列的一部分,可以理解和生成自然语言。该模型具有强大的总结能力,可以从大量的文本数据中学习复杂的对象属性和关系。研究人员利用这种能力,让机器人根据用户提供的几个示例对象放置位置,如“黄色衬衫放在抽屉里,深紫色衬衫放在衣柜里,白色袜子放在抽屉里”,然后让模型总结出用户的一般偏好规则,并应用到未来的交互中。

研究人员在论文中写道:“我们的基本见解是,LLM(大型语言模型)的总结能力与个性化机器人的泛化需求非常匹配。LLM展示了通过总结实现泛化的惊人能力,利用从海量文本数据集中学习到的复杂对象属性和关系。”

他们还写道:“与需要昂贵的数据收集和模型训练的传统方法不同,我们展示了LLM可以直接开箱即用地实现机器人领域的泛化,利用它们从海量文本数据中学习到的强大的总结能力。”

研究人员在论文网站上展示了一个机器人,它能够将洗衣服分为浅色和深色,回收饮料罐,扔掉垃圾,收拾包和餐具,将散落的物品放回原处,并将玩具放入抽屉。

研究人员首先测试了一个基于文本的基准数据集,其中输入了用户偏好,并要求模型创建个性化规则来确定物品归属。模型将示例总结为一般规则,并使用总结来确定新物品的放置位置。基准场景定义在四个房间中,每个房间有24个场景。每个场景包含两到五个放置物品的地方,并且有相同数量的已见和未见物品供模型分类。他们写道,这个测试在未见物品上达到了91.2%的准确率。

当他们将这种方法应用到真实世界的机器人TidyBot时,他们发现它能够成功地收拾85%的物体。TidyBot在八个真实场景中进行了测试,每个场景有一组十个物品,并在每个场景中运行机器人3次。据IT之家了解,除了LLM,TidyBot还使用了一个叫做CLIP的图像分类器和一个叫做OWL-ViT的物体检测器。

佐治亚理工学院交互计算学院的助理教授徐丹飞(DanfeiXu)在谈到谷歌的PaLM-E模型时表示,LLM使机器人具有更多的问题解决能力。“以前的任务规划系统大多依赖于一些形式的搜索或优化算法,这些算法不太灵活,也很难构建。LLM和多模态LLM使这些系统能够从互联网规模的数据中受益,并轻松地用于解决新问题。”他说。

以上内容为资讯信息快照,由td.fyun.cc爬虫进行采集并收录,本站未对信息做任何修改,信息内容不代表本站立场。

快照生成时间:2023-05-15 09:45:28

本站信息快照查询为非营利公共服务,如有侵权请联系我们进行删除。

信息原文地址:

两个人工智能系统说起“悄悄话”
...言交流。该成果发表在最新一期《自然·神经科学》上。研究人员开发的人工神经网络模型,展示了AI系统解释语言指令并相应执行任务的能力。在学习并执行一系列基本任务后,其中一个AI系
2024-03-25 03:02:00
本文转自:北京日报无需指令就能帮忙取物具身智能机器人“眼里有活”本报讯(记者 刘苏雅)只需一个眼神、一个动作,机器人就能对人的需求“心领神会”,主动干起家务活。昨天,记者在北京通
2024-04-18 03:18:00
大模型这把“火”,烧到了人形机器人
...令、3个维度的基础移动指令和1个维度的状态切换指令。研究人员让机器人执行了超过 700 项任务,结果显示:在之前见过的场景、之前未见过的场景、被干扰场景、背景更换场景,搭载
2024-02-02 10:00:00
OpenAI没有放弃的机器人梦想
...灵巧的机器人动作能力。 为了实现视频中的效果,Figure研究人员将机器人摄像头捕获的图像和机载麦克风捕捉到的语音转录文本,输入到一个由OpenAI训练的大型多模态模型中,
2024-03-18 10:00:00
...受影响可能最小,人们花在这方面的时间将只减少约20%。研究人员指出,用于做家务活的机器人已经成为全球销售和使用最广泛的机器人。此外,研究还指出,针对不同种类的家务活,机器人未
2023-02-24 04:35:00
懒人狂喜,会洗衣做饭的家务机器人来了
...特别是在桌面操作方面。来自斯坦福大学和谷歌DeepMind的研究人员团队通过创建Mobile ALOHA(一个低成本开源硬件系统
2024-01-09 11:29:00
马斯克擎天柱大将跳槽,在抱抱脸开源一套机器人技术:会做家务的大白,复刻低至1800
...自 凹非寺量子位 | 公众号 QbitAI马斯克部下跳槽,把人形机器人技术开源了。不少创业公司的估值,一夜被打了骨折。最新成果已正式发布——它能像大白(●—●)一样,听懂并正
2024-06-11 13:57:00
消息称OpenAI考虑开发人形机器人,此前已投资多家机器人初创公司
...关闭前取得了几项研究里程碑。在一个项目中,OpenAI 的研究人员训练了一个机械臂来解魔方。该公司还开源了 Roboschool,这是一套可用于训练机器人车载人工智能软件的模
2024-12-25 10:05:00
让机器人成为家务能手还要多久
...凤凰”能拍摄正在完成的任务,然后将整个活动数字化。研究人员利用这些数据创建了一个虚拟环境,甚至可模拟包括重力和阻力在内的物理现象。机器人能在此进行任务练习,直到对某件事情熟练
2023-09-11 02:26:00
更多关于科技的资讯: