• 我的订阅
  • 科技

生成模型真实物理引擎Genesis来了!由全球AI顶尖高校团队开发

类别:科技 发布时间:2024-12-20 09:22:00 来源:DeepTech深科技

来自卡内基梅隆大学、马里兰大学、哥伦比亚大学、斯坦福大学、麻省理工学院、清华、北大、港大等全球 AI 顶尖高校和 Nvdia 等研究机构的华人团队,历时 24 个月,合作开发了一款能够生成 4D 动态世界的生成物理引擎 Genesis。

生成模型真实物理引擎Genesis来了!由全球AI顶尖高校团队开发

(来源:GitHub)

一经发布,项目迅速在 X 获得数十万人关注。

Genesis 作为一个从底层重新设计和构建的通用物理引擎,其核心特点是将多种物理求解器及其耦合集成到了统一的框架中。

课题组领导者淦创教授称:“我们的方法核心是逆向工程人类心智模型,并构建由生成物理引擎驱动的机器人大脑!”

借助 GPU 加速的并行计算技术,以及优化的碰撞检测、自动休眠和接触岛等特性,Genesis 能够实现前所未有的模拟速度——在物理模拟速度方面,Genesis 比现有的 GPU 加速机器人模拟器(如 Isaac Gym/Sim/Lab、Mujoco MJX 等)快 10 到 80 倍,同时还保持了高精度的物理模拟保真度。

在单平面与 Franka 机械臂的操作场景中,其运行速度达到了 4300 万帧每秒,相当于实时运行速度的 43 万倍。对于大规模模拟场景,Genesis 还能够通过自动休眠机制加速已收敛和静态实体的模拟过程,进一步提升整体性能。

生成模型真实物理引擎Genesis来了!由全球AI顶尖高校团队开发

(来源:GitHub)

在功能特性方面,Genesis 建立了一个统一的框架,支持多种最先进的物理求解器,能够模拟广泛的材料类型和物理现象。平台不仅提供了照片级真实的光线追踪渲染功能,还支持完全可微分的模拟能力。

目前,其 MPM 求解器和工具求解器已经实现了可微分性,其他求解器的可微分功能也将陆续加入。并且,Genesis 还包含了物理精确且可微分的触觉传感器模拟。

Genesis 的另一个重要创新是将物理引擎与生成式 AI 技术相结合。平台集成了基于大语言模型的生成代理,能够根据自然语言描述自动创建各种形式的数据。例如,当用户要求生成“一个手持棍子的孙悟空小型角色在桌面上奔跑 3 秒,然后跳跃到空中”这样的场景时,Genesis 能够自动生成符合物理规律且视觉连贯的动画序列,同时智能控制相机运动,确保最佳观察视角。

在机器人控制方面,Genesis 展现出了全方位的能力。系统能够自动生成各种复杂的机器人控制策略,从四足机器人的各种步态、双足跳跃和倒立,到人形机器人的单脚跳跃,再到机械手的精细操作。例如,Genesis 能够为 24 架无人机编队生成同步起飞和翻转动作的控制策略。且在模拟环境中生成的控制策略能够成功迁移到现实世界中的机器人上。平台还支持软体机器人的模拟,能够处理蠕虫状软体机器人的运动、混合刚-软体结构的行走等复杂行为。

除了基础的物理模拟和机器人控制,Genesis 的能力还延伸到了更广泛的领域。在场景生成方面,平台能够创建包含客厅、餐厅、卫生间等完整功能空间的交互式 3D 环境。

在表情和语音生成方面,系统可以生成与文本内容匹配的面部动画和语音,并实现从中性到愤怒再到快乐等情绪的自然过渡。这种多模态生成能力为虚拟人物的创建提供了新的可能性。

目前,研究团队已经开源了底层物理引擎和模拟平台的代码(项目地址:https://genesis-embodied-ai.github.io/),生成框架部分也将在未来逐步开放。

作为一个纯 Python 开发的平台,其安装过程十分简单,还为用户提供了极其简洁友好的 API 设计。

并且,Genesis 实现了跨平台兼容,能够原生支持 Nvidia、AMD、Apple 和 Intel 的 GPU/CPU,以及 Windows、MacOS 和 Linux 等主流操作系统,这种广泛的平台支持极大地提升了其实用性。

易用、强大,或许,Genesis 真的能“开创”一个新时代,AI 离真实的物理世界,或许越来越近了。

“我认识到许多机器人学家对此方法持怀疑态度,指出设置模拟器和解决模拟与现实差距的困难。他们主张仅专注于从现实世界数据中学习。我理解这些担忧,但我坚信我们不能仅仅因为创建一个好的物理模拟器具有挑战性就绕过物理模拟器!”淦创说,“请加入创世纪社区!我们希望说服机器人界‘Generative Physics Simulator is all You Need!’”

以上内容为资讯信息快照,由td.fyun.cc爬虫进行采集并收录,本站未对信息做任何修改,信息内容不代表本站立场。

快照生成时间:2024-12-20 12:45:02

本站信息快照查询为非营利公共服务,如有侵权请联系我们进行删除。

信息原文地址:

类Sora模型能否理解物理规律?字节豆包大模型团队系统性研究揭秘
视频生成模型虽然可以生成一些看似符合常识的视频,但被证实目前还无法理解物理规律!自从 Sora 横空出世,业界便掀起了一场「视频生成模型到底懂不懂物理规律」的争论。图灵奖得主 Y
2024-11-09 09:59:00
DeepMind大模型再登Nature:8分钟预测15日天气,超顶尖物理模型
...气都能分析。在97.2%的场景中,GenCast的表现都超过了全球顶尖的中期天气预报系统ENS。不同于DeepMind之前推出的GraphCast的确定性预测
2024-12-06 09:51:00
从空间智能到具身智能,跨维践行Sim2Real AI最高效路径
...引入了全新的 4D Mesh 技术,专为动态物理仿真和数据渲染生成而设计,可统一处理刚体、软体、流体等多种对象。作为引擎的核心表达形式
2024-07-23 09:40:00
NVIDIA创始人兼首席执行官黄仁勋:生成式AI将为创作者带来加速动力
...行官黄仁勋近日在法国里维埃拉戛纳国际创意节上表示,生成式 AI 将为各行各业、各类内容的创作者带来加速动力。黄仁勋在与全球市场营销和传播服务公司 WPP 首席执行官 Mark
2023-06-27 14:31:00
《卖身契》修复记:AI重现“打工人”喜剧魅力,留住老电影的黄
...首次将AIGC视觉大模型引入到影片修复,对大模型进行了生成质量和效率等方面的算法优化。如今随着Sora等大模型在视觉领域的发展,视觉大模型不仅运用在视频生成、修改、融合和延伸
2024-04-22 20:30:00
「学术版ChatGPT」登场!Ai2打造科研效率神器OpenScholar,让LLM帮你搞定文献综述
...。模型在推理时会检索相关段落,并使用迭代式自反馈的生成方法来优化输出;搭配的专门基准ScholarQABench旨在对开放式科学问答进行现实且可重复的评估
2024-11-27 13:33:00
全面AIGC时代,豆包模型家族准备好了
...」深圳站中,豆包模型家族再次全新发布两款豆包·视频生成模型:豆包视频生成-PixelDance、豆包视频生成-Seaweed,并面向企业市场开启邀测。活动中,火山引擎总裁谭待
2024-09-26 13:49:00
Sora为何没能诞生在中国?
...常要团队里最优秀的人来做这件事。国外许多科技公司的顶尖AI人才,都会在一线亲自处理数据,写代码”。据OpenAI官网介绍,Sora的核心团队共15人。公开资料显示,团队的成立
2024-03-19 05:31:00
200余位顶尖学者和产业专家共议人工智能热点问题
...届北京智源大会在中关村展示中心开幕。200余位人工智能顶尖学者和产业专家,围绕人工智能关键技术路径和应用场景等问题展开主题演讲和尖峰对话。6月14日,第六届北京智源大会在中关
2024-06-14 22:21:00
更多关于科技的资讯:
“消失的法老”回来了!“BesTV上海博物馆”今天上线 计划实现上海电视用户全覆盖
11月18日,“廿念不忘,帧帧日上——百视通成立20周年分享会”在国际会议中心举行。作为20周年重磅发布之一,由百视通与上海博物馆联合打造的“BesTV上海博物馆”产品正式亮相并登陆上海移动高清电视
2025-11-20 08:06:00
入住4年仍甲醛超标!福建卫视《现场》探访实录,解码智能门的健康升级路径
近日,福州居然之家王力安防门店迎来了一位特别的客人——消费者丁先生专程送来一面写有“贴心服务暖人心,智能监测护健康”的锦旗
2025-11-20 08:06:00
厦门网讯(厦门日报记者 林露虹) 近日,专注于毫米波雷达芯片研发的厦企——矽杰微电子(厦门)有限公司(简称“矽杰微电子”)完成C1轮增资
2025-11-20 08:29:00
厦门围绕“金鸡”品牌 在影视产业链上持续发力
陈铎(中)指导员工进行《活宝档案》动画制作。海丝(厦门)电影工业产业基地施工现场。 厦门网讯(文/图 厦门日报记者 邬秀君)走进位于软件园一期的继来之(厦门)人工智能研究院有限公司
2025-11-20 08:30:00
记者走基层|集装箱“搬上”无人车 解锁配送新技能
11月1日,在廊坊座头鲸科技有限公司智能制造基地,工作人员对蓝丁智能无人配送车底盘进行性能测试。 河北日报记者 刘 杰摄11月1日清晨
2025-11-20 08:49:00
破局之法,精耕之道 《精耕者访谈》第三季·区域之王重磅开启!
11月18日,由蓝河乳业独家冠名的《精耕者访谈》第三季·区域之王正式启动。作为母婴行业首个高端访谈栏目,其始终着眼于市场一线
2025-11-20 09:06:00
北京博大健康体检管理中心盛大启幕 以“科技+精准”重新定义健康管理新标杆
11月18日上午,北京博大健康体检管理中心(简称“博大体检”或“中心”)在京举行开业典礼,正式落地北京经济技术开发区南海绿茵国际园区
2025-11-20 09:06:00
以儿童为本——赖园青的幼儿教育科学实践之路
在人工智能与教育深度融合的浪潮中,如何让技术真正服务于幼儿认知发展?上海浦东新区民办普瑞姆幼儿园园长赖园青用贯穿理论与实践的智慧教育探索
2025-11-20 10:06:00
山东移动招远分公司秋冬宽带服务义诊暖心启动 专业服务守护数字生活
胶东在线11月19日讯(通讯员王少娜徐冰鑫)秋冬时节,居民居家上网需求激增,网络卡顿、信号盲区、设备老化等问题更易影响用户使用体验
2025-11-20 10:17:00
四梯科技重磅发布智能产业工程师证书项目 推动教育科技人才一体化发展
2025年11月14日,在深圳第二十七届中国国际高新技术成果交易会第二届产教融合与科教融汇论坛上,北京四梯科技有限公司(以下简称“四梯科技”)首次面向社会正式发布“四梯智能产业工程师证书项目”(4T SIEC)
2025-11-20 11:37:00
一屏承古韵,元景越千年!联通数智重构文博文创新范式的野望
11月17日,“中华文明起源系列——‘看·见殷商’”展览总结暨博物馆高质量发展研讨会在北京大运河博物馆举行。会上回顾了“看·见殷商”展览的创新实践
2025-11-20 12:07:00
名创优品斩获国际零售地产大奖MAPIC 2025\
在法国戛纳举办的 2025 年全球零售商业地产峰会大奖(MAPIC Awards)中,名创优品凭借其MINISO LAND战略级店态
2025-11-20 14:38:00
正雅2025中亚市场战略深入拓展,彰显国际品牌实力
2025年,正雅齿科持续推动其在中亚和俄罗斯市场的战略布局,通过一系列系统化的全球参展和品牌活动,进一步巩固其在隐形正畸领域的国际影响力
2025-11-20 15:08:00
北京搭台助“实干派”机器人出圈
这两天京城寒意持续“在线”,中关村国家自主创新示范区展示中心内却是一片热火朝天——99支团队带着各自的“智能劳动者”,在2025年第二届中关村具身智能机器人应用大赛上展开“终极对决”
2025-11-20 15:08:00