• 我的订阅
  • 科技

迪士尼是怎么做双足机器人的?

类别:科技 发布时间:2024-08-02 09:39:00 来源:智东西

智东西8月1日消息,7月15日,迪士尼公布了一篇16页的论文,详细介绍了他们新型双足机器人BD-X的主要设计和控制方法。这个机器人外形酷似《机器人总动员》里的“瓦力”,灵感源自于《星球大战》中的同名机器人。其硬件采用标准零件和3D打印外壳,腿部有5个自由度,通过强化学习掌握了动画人物的行走姿态,动作灵巧流畅,还锻炼出跨越复杂地形的能力。

在不久前的IEEE活动上,这个迪士尼机器人还跟杭州宇树科技的机器狗面对面炫技斗舞。

更早之前,它在今年3月的英伟达GTC大会上作为惊喜嘉宾压轴出场,与英伟达创始人兼CEO黄仁勋亲密互动,还摇头晃脑撒娇卖萌。

这一机器人以娱乐为目的的设计理念极大降低了硬件复杂度与成本。但迪士尼为这台机器人加上了额外的扬声器、天线、头灯和眼睛,这让它能以更多的方式表现自己的“情绪”。

虽然BD-X看上去活灵活现,似乎真的能理解人们说的话,但其实它并不具备主动的感知和行为能力。它的一举一动都是通过人工操作实现的。这台机器人配备了来自英伟达的机载计算机Jetson,能将人类指令与训练时积累的经验结合,输出最终的行动指令。

论文地址:https://la.disneyresearch.com/publication/design-and-control-of-a-bipedal-robotic-character/

一、机械设计简单有效,服务娱乐与创意目的

迪士尼在设计BD-X机器人时选择了与大多数企业都不同的路径。他们并不追求最好、最强大的机械设计,而是选择了能够满足创意和娱乐目的的简单设计。研究者成功集成了动画内容、设计、控制、实时操纵等元素,并用不到1年的时间实现了定制机器人角色的快速开发。

这一机器人主要使用了市面上的标准化零件,而外壳则是3D打印的,但经过软件调试后,仍然可以在降低硬件复杂度的前提下实现不错的表现。

这一双足机器人的总重为15.4公斤,高度为0.66米。每条腿上有5个自由度,而头部与颈部则有4个自由度。腿部的高自由度使得这一机器人能完成大幅度的动作,而头颈部的高自由度则让机器人可以通过动作表现各种妙趣横生、情感丰富的动作。

迪士尼的工程师还通过巧妙的设计让机器人能在没有膝盖弯曲执行器的情况下,依赖与地面的接触实现逼真的膝盖弯曲效果。这一机器人配备一块微控制器驱动的通讯板,能以600赫兹的频率实现内置电脑、执行器和惯性测量单元之间的通讯。1块可拆卸电池为机器人供电,能维持至少1个小时的运转时间。

有趣的是,除了头部和躯干上配备的扬声器,这台机器人还有具备执行器的天线、能点亮的眼睛和一盏头灯。这些设备为机器人提供了更多表现情绪的方式,同时其控制和驱动都是相对独立的,因此可以选择是否搭载这些功能。

二、利用强化学习掌握动画动作,在英伟达Isaac Gym中模拟训练

为了给机器人动作提供一个清晰的框架,迪士尼的研究人员将机器人的动作分为以下3类。

1、持续性动作:没有明确的起点和终点。机器人保持平衡,并对测量到的状态和连续的控制输入流做出响应。

2、周期性运动:有一个周期性的相位信号传递给策略。在这种模式下,相位信号无限循环。

3、偶发性运动:有预定的持续时间。策略接收单调递增的相位信号,一旦运动结束,就会强制过渡到新的运动。

机器人的控制策略是机器人学中的重要概念,指的是将机器人的状态映射为动作或电机命令的函数,使机器人能实现预期的行为和任务。

研究人员让BD-X机器人通过强化学习的方式掌握了多种控制策略,分别针对上述3种类型的动作。

根据机器人的CAD模型,迪士尼的研究人员构建出了这一机器人的准确物理形态、执行器和它与环境的互动,并通过英伟达的机器人训练平台Isaac Gym模拟出这一机器人的刚体动力学特征。研究人员还通过定制的执行器模型进一步模拟了这一机器人的完整动力学特征。

BD-X机器人的动作是根据动画内容学习的。迪士尼的研究人员提取了动画中人物的特定动作指标,如躯干的全局位置、关节的位置和矢量等信息,这些信息将用来训练这一BD-X机器人模仿动画中的动作。

在Isaac Gym的模拟训练中,机器人会收到强化学习系统的奖励和惩罚。这一系统会考虑动作与动画人物的相似度、动作的规范程度(如有无关节扭曲、动作是否流畅)以及机器人是否生存(“死亡”被定义为头和躯干与地面接触,或头和躯干碰撞),并给出相应的奖惩。

训练过程中,系统还会模拟出随机的扰动、牵引力还有不同的地貌,这提升了机器人的鲁棒性(Robustness,指抗干扰性或稳定性)。

三、并无主动感知和行动能力,通过复杂控制器实现运动

迪士尼的研究人员称,在发布这篇论文时,BD-X机器人已经有过累计10小时的公开展示运行时间,在这10小时里这一机器人表现完美,一次都没有摔倒。许多观众都被这一机器人可爱的外表吸引,而未注意到这一机器人的操纵者。

实际上,BD-X机器人并无任何主动的行为和感知能力,其动作都是通过专业人员操纵一个复杂的控制器实现的。在运行期间,操作员可以使用直观的遥控互动界面控制这一机器人。这一操纵设备较为复杂,有2个摇杆、2块路径板,正反面总计有十几个按键。在虚拟训练结束后,神经控制策略的权重被冻结,策略网络被部署到机器人的机载计算机Jetson上。部署后的控制策略和低层次控制器直接与机器人的硬件交互,还能融入惯性测量单元和执行器的测量数据。

机器人内置的动画引擎能自动将操作员输入的指令,与机器人内置的策略控制命令、展示功能信号(天线、眼睛、头灯的控制信号)和声音信号结合起来,为控制策略生成最终指令。

人工操纵指令和内置策略控制命令的结合能避免机器人出现训练过程中研究人员希望规避的动作,如摔倒、动作僵硬不流畅等等。

展示功能和音频是机器人的受控元素,在表现角色方面起着关键作用,但不会影响系统的动态。它们的行为通过动画引擎发出的动画信号和状态反馈与机器人的运动同步。

结语:AI让动画人物走进现实,“不实用”的机器人也有价值

其实迪士尼是机器人领域的资深玩家,从上世纪60年代以来他们就一直深耕机器人相关研究,并且在迪士尼乐园中尝试部署他们的研究成果,探索让动画人物走进现实世界的各种方式和场景。

AI技术的发展让机器人的一举一动都更为逼真自然,而强化学习让专业动画师制作的人物动作在现实中落地。虽然BD-X机器人并不像其它双足机器人那样能进工厂、上流水线,但我们也乐见娱乐目的的机器人技术进一步发展,让普通人也能享受到机器人带来的快乐。

来源:迪士尼

迪士尼是怎么做双足机器人的?

以上内容为资讯信息快照,由td.fyun.cc爬虫进行采集并收录,本站未对信息做任何修改,信息内容不代表本站立场。

快照生成时间:2024-08-02 11:45:07

本站信息快照查询为非营利公共服务,如有侵权请联系我们进行删除。

信息原文地址:

探访“迪士尼”背后的中国工厂,AI与机器人挑大梁,旷视助生产效率翻番
智东西(公众号:zhidxcom)作者 | 李水青编辑 | 心缘
2022-12-15 02:02
2024 年的机器人,下一个 ChatGPT
...载荷来探索火星车无法到达的区域。 图源 | Space.com05在迪士尼乐园和机器人玩耍现在,你可以和真人扮演的米老鼠、玲娜贝儿在迪士尼乐园里互动,未来可能有一群机器人成
2024-01-31 23:00:00
世界首款!英伟达发布人形机器人模型
...讲中,宣布了该公司的人形机器人项目。黄仁勋还介绍了迪士尼研究中心搭载的英伟达Jetson嵌入式系统的机器人,并展示了它们是如何通过使用英伟达的IsaacSim机器人仿真器学习
2024-03-21 16:43:00
...其他的技能,进而能够融入现实世界并与人类进行互动。迪士尼的orange和green机器人也来到现场,这款机器人用的是英伟达为机器人设计的首款AI芯片Jetson。
2024-03-20 01:49:00
马斯克戛纳行:修复广告商关系 不忘大谈AI、算力工厂、机器人
...。简单来说,由于不满马斯克涉及巴以问题的一些看法,迪士尼、苹果等“大金主”完全停止了在X平台上的投放。随后马斯克在纽约的一场活动中,先是点名询问迪士尼CEO罗伯特·艾格有没有
2024-06-20 09:12:00
呆萌又可爱!黄仁勋展示机器人Blue:还开源全球首款人形机器人基础模型
...——一款开源物理引擎,该引擎由英伟达与Google DeepMind和迪士尼研究院共同开发,专门用于机器人研发。名为Blue的机器人正是基于Newton
2025-03-19 16:57:00
首个消费级意识仿生机器人,WALL-E从《机器人总动员》迈向现实|早期项目
...人们的家庭。销售计划方面,「Scrap Metal Robotic」会在与迪士尼的IP授权协议签署完成后进行限量众筹预售
2024-03-26 14:07:00
【科技早报】OpenAI 发布多模态预训练大模型 GPT-4;微软将推进1万人裁员计划
...堆叠技术:谣言4.三星电子将在日本设立半导体研究所5.迪士尼任命新任首席人力资源官【政策时讯】市场监管总局:2022年接收新能源汽车投诉举报1.6万件据市场监管总局3月14日
2023-03-15 21:00:00
Uber机器人送外卖业务进军日本
...该公司称,此举在日本大型便利店中尚属首次。位居东京迪士尼附近的Hen na Hotel酒店将自己标榜为机器人酒店,因为据它的经理人Yukio Nagai称
2024-02-22 00:57:00
更多关于科技的资讯: