• 我的订阅
  • 科技

生成模型真实物理引擎Genesis来了!由全球AI顶尖高校团队开发

类别:科技 发布时间:2024-12-20 09:22:00 来源:DeepTech深科技

来自卡内基梅隆大学、马里兰大学、哥伦比亚大学、斯坦福大学、麻省理工学院、清华、北大、港大等全球 AI 顶尖高校和 Nvdia 等研究机构的华人团队,历时 24 个月,合作开发了一款能够生成 4D 动态世界的生成物理引擎 Genesis。

生成模型真实物理引擎Genesis来了!由全球AI顶尖高校团队开发

(来源:GitHub)

一经发布,项目迅速在 X 获得数十万人关注。

Genesis 作为一个从底层重新设计和构建的通用物理引擎,其核心特点是将多种物理求解器及其耦合集成到了统一的框架中。

课题组领导者淦创教授称:“我们的方法核心是逆向工程人类心智模型,并构建由生成物理引擎驱动的机器人大脑!”

借助 GPU 加速的并行计算技术,以及优化的碰撞检测、自动休眠和接触岛等特性,Genesis 能够实现前所未有的模拟速度——在物理模拟速度方面,Genesis 比现有的 GPU 加速机器人模拟器(如 Isaac Gym/Sim/Lab、Mujoco MJX 等)快 10 到 80 倍,同时还保持了高精度的物理模拟保真度。

在单平面与 Franka 机械臂的操作场景中,其运行速度达到了 4300 万帧每秒,相当于实时运行速度的 43 万倍。对于大规模模拟场景,Genesis 还能够通过自动休眠机制加速已收敛和静态实体的模拟过程,进一步提升整体性能。

生成模型真实物理引擎Genesis来了!由全球AI顶尖高校团队开发

(来源:GitHub)

在功能特性方面,Genesis 建立了一个统一的框架,支持多种最先进的物理求解器,能够模拟广泛的材料类型和物理现象。平台不仅提供了照片级真实的光线追踪渲染功能,还支持完全可微分的模拟能力。

目前,其 MPM 求解器和工具求解器已经实现了可微分性,其他求解器的可微分功能也将陆续加入。并且,Genesis 还包含了物理精确且可微分的触觉传感器模拟。

Genesis 的另一个重要创新是将物理引擎与生成式 AI 技术相结合。平台集成了基于大语言模型的生成代理,能够根据自然语言描述自动创建各种形式的数据。例如,当用户要求生成“一个手持棍子的孙悟空小型角色在桌面上奔跑 3 秒,然后跳跃到空中”这样的场景时,Genesis 能够自动生成符合物理规律且视觉连贯的动画序列,同时智能控制相机运动,确保最佳观察视角。

在机器人控制方面,Genesis 展现出了全方位的能力。系统能够自动生成各种复杂的机器人控制策略,从四足机器人的各种步态、双足跳跃和倒立,到人形机器人的单脚跳跃,再到机械手的精细操作。例如,Genesis 能够为 24 架无人机编队生成同步起飞和翻转动作的控制策略。且在模拟环境中生成的控制策略能够成功迁移到现实世界中的机器人上。平台还支持软体机器人的模拟,能够处理蠕虫状软体机器人的运动、混合刚-软体结构的行走等复杂行为。

除了基础的物理模拟和机器人控制,Genesis 的能力还延伸到了更广泛的领域。在场景生成方面,平台能够创建包含客厅、餐厅、卫生间等完整功能空间的交互式 3D 环境。

在表情和语音生成方面,系统可以生成与文本内容匹配的面部动画和语音,并实现从中性到愤怒再到快乐等情绪的自然过渡。这种多模态生成能力为虚拟人物的创建提供了新的可能性。

目前,研究团队已经开源了底层物理引擎和模拟平台的代码(项目地址:https://genesis-embodied-ai.github.io/),生成框架部分也将在未来逐步开放。

作为一个纯 Python 开发的平台,其安装过程十分简单,还为用户提供了极其简洁友好的 API 设计。

并且,Genesis 实现了跨平台兼容,能够原生支持 Nvidia、AMD、Apple 和 Intel 的 GPU/CPU,以及 Windows、MacOS 和 Linux 等主流操作系统,这种广泛的平台支持极大地提升了其实用性。

易用、强大,或许,Genesis 真的能“开创”一个新时代,AI 离真实的物理世界,或许越来越近了。

“我认识到许多机器人学家对此方法持怀疑态度,指出设置模拟器和解决模拟与现实差距的困难。他们主张仅专注于从现实世界数据中学习。我理解这些担忧,但我坚信我们不能仅仅因为创建一个好的物理模拟器具有挑战性就绕过物理模拟器!”淦创说,“请加入创世纪社区!我们希望说服机器人界‘Generative Physics Simulator is all You Need!’”

以上内容为资讯信息快照,由td.fyun.cc爬虫进行采集并收录,本站未对信息做任何修改,信息内容不代表本站立场。

快照生成时间:2024-12-20 12:45:02

本站信息快照查询为非营利公共服务,如有侵权请联系我们进行删除。

信息原文地址:

类Sora模型能否理解物理规律?字节豆包大模型团队系统性研究揭秘
视频生成模型虽然可以生成一些看似符合常识的视频,但被证实目前还无法理解物理规律!自从 Sora 横空出世,业界便掀起了一场「视频生成模型到底懂不懂物理规律」的争论。图灵奖得主 Y
2024-11-09 09:59:00
DeepMind大模型再登Nature:8分钟预测15日天气,超顶尖物理模型
...气都能分析。在97.2%的场景中,GenCast的表现都超过了全球顶尖的中期天气预报系统ENS。不同于DeepMind之前推出的GraphCast的确定性预测
2024-12-06 09:51:00
从空间智能到具身智能,跨维践行Sim2Real AI最高效路径
...引入了全新的 4D Mesh 技术,专为动态物理仿真和数据渲染生成而设计,可统一处理刚体、软体、流体等多种对象。作为引擎的核心表达形式
2024-07-23 09:40:00
NVIDIA创始人兼首席执行官黄仁勋:生成式AI将为创作者带来加速动力
...行官黄仁勋近日在法国里维埃拉戛纳国际创意节上表示,生成式 AI 将为各行各业、各类内容的创作者带来加速动力。黄仁勋在与全球市场营销和传播服务公司 WPP 首席执行官 Mark
2023-06-27 14:31:00
《卖身契》修复记:AI重现“打工人”喜剧魅力,留住老电影的黄
...首次将AIGC视觉大模型引入到影片修复,对大模型进行了生成质量和效率等方面的算法优化。如今随着Sora等大模型在视觉领域的发展,视觉大模型不仅运用在视频生成、修改、融合和延伸
2024-04-22 20:30:00
「学术版ChatGPT」登场!Ai2打造科研效率神器OpenScholar,让LLM帮你搞定文献综述
...。模型在推理时会检索相关段落,并使用迭代式自反馈的生成方法来优化输出;搭配的专门基准ScholarQABench旨在对开放式科学问答进行现实且可重复的评估
2024-11-27 13:33:00
全面AIGC时代,豆包模型家族准备好了
...」深圳站中,豆包模型家族再次全新发布两款豆包·视频生成模型:豆包视频生成-PixelDance、豆包视频生成-Seaweed,并面向企业市场开启邀测。活动中,火山引擎总裁谭待
2024-09-26 13:49:00
Sora为何没能诞生在中国?
...常要团队里最优秀的人来做这件事。国外许多科技公司的顶尖AI人才,都会在一线亲自处理数据,写代码”。据OpenAI官网介绍,Sora的核心团队共15人。公开资料显示,团队的成立
2024-03-19 05:31:00
200余位顶尖学者和产业专家共议人工智能热点问题
...届北京智源大会在中关村展示中心开幕。200余位人工智能顶尖学者和产业专家,围绕人工智能关键技术路径和应用场景等问题展开主题演讲和尖峰对话。6月14日,第六届北京智源大会在中关
2024-06-14 22:21:00
更多关于科技的资讯:
合作再升级 阿维塔完成向华为115亿投资支付
阿维塔给华为打了34.5亿,这是第三笔投资款,算下来阿维塔前后一共给了115亿,现在这笔钱全付清了,这意味着阿维塔正式拿到了华为引望10%的股份
2025-10-10 12:16:00
记者10月9日获悉,国家发展改革委、市场监管总局近日发布《关于治理价格无序竞争维护良好市场价格秩序的公告》,提出在保护经营者自主定价权的前提下
2025-10-10 12:20:00
中新经纬10月10日电 题:京东为啥也要卖咖啡?作者 朱丹蓬 广东省食品安全保障促进会副会长、中国食品产业分析师随着消费者对“即买即得”需求的日益增长
2025-10-10 12:23:00
虎鲸文娱发布《2025国庆假期文娱消费报告》票房火热 大屏“圈粉”南报网讯(记者鲁舒婷)10月8日,虎鲸文娱发布的《2025国庆假期文娱消费报告》(以下简称《报告》)显示
2025-10-10 07:32:00
名创优品MINISO深耕IP战略:岭南骑楼店开业首日引爆Z世代消费热潮
2025年8月17日,名创优品MINISO LAND华南首店于广州北京路步行街正式开业。该店以百年岭南骑楼为空间载体,融合超过100个全球热门IP
2025-10-09 11:15:00
荣耀Magic8系列发布会官宣定档10月15日
10月9日,荣耀官方正式宣布,主题为“开新局・见未来”的荣耀 Magic8 系列暨 Magic OS10 发布会将于10 月15日正式举行
2025-10-09 11:30:00
局部降水量80毫米以上!10—14日烟台市将有持续连阴雨天气
齐鲁晚报·齐鲁壹点 周宣刚10月7日10时,烟台市气象局发布10—14日连阴雨天气预报和大风警报。受高空槽东移和暖湿气流输送北上的水汽影响
2025-10-09 11:31:00
权威发布, 福瑞达颐莲品牌价值评估突破120亿
2025年9月25日,在中国香料香精化妆品工业协会主办的“2025中国香妆品牌价值大会”上,福瑞达生物股份旗下颐莲品牌凭借卓越的市场表现与品牌影响力
2025-10-09 11:32:00
持续创新高!高德扫街榜上线23天用户超4亿
这个国庆黄金周,高德APP和高德扫街榜正在持续创新高——10月3日,高德扫街榜宣布:上线仅23天,累计用户超4亿。10月1日
2025-10-09 11:33:00
国庆中秋,大马再掀中餐热潮!“鱼你速度”树出海标杆!
国庆中秋双节期间,马来西亚再度掀起中餐热潮!以“鱼你在一起”为代表的中餐连锁品牌,在当地各大商圈持续引爆消费热情。“6个月
2025-10-09 11:34:00
开启商超智慧储鲜,澳柯玛新品冷柜让食材更鲜活
鲁网10月9日讯当社区团购爆单时冰柜塞不下?当生鲜进货量太大冻不透?当网红雪糕因串味被迫贱卖?针对这些让商超、饭馆等用户抓狂的痛点
2025-10-09 11:40:00
鸡排哥8天假期涨粉超40万,节前已成立工作室,10月9日休息一天
10月8日,江西景德镇鸡排哥在个人社交账号发布一则视频,向全国各地来到家乡景德镇游玩和打卡买鸡排的游客表示感谢。鸡排哥表示近期天气炎热
2025-10-09 12:09:00
大疆部分产品直降千元!消费者炸锅,官方回应
10月8日,大疆在官网提前挂出“双十一”促销信息,多款产品价格直降数百至上千元。此次降价幅度较大。从几百元到几千元不等
2025-10-09 13:45:00
单日游客最高突破6.9万人次 忠县橘若·忠州渡接住“泼天流量”
这个国庆假期,重庆忠县江畔的橘若·忠州渡结结实实地“火”出了圈,八天揽客30余万人次,游客单日最高接待量突破6.9万人次
2025-10-09 13:57:00
谷子科技“智慧票根”创新亮相2025和平精英PEL运动会
10月7日,由谷子科技集团、和平精英职业联赛(PEL)与腾讯音乐娱乐集团联合出品,腾讯音乐娱乐集团与安徽易趣网络科技有限公司承办
2025-10-09 14:01:00