• 我的订阅
  • 科技

生成模型真实物理引擎Genesis来了!由全球AI顶尖高校团队开发

类别:科技 发布时间:2024-12-20 09:22:00 来源:DeepTech深科技

来自卡内基梅隆大学、马里兰大学、哥伦比亚大学、斯坦福大学、麻省理工学院、清华、北大、港大等全球 AI 顶尖高校和 Nvdia 等研究机构的华人团队,历时 24 个月,合作开发了一款能够生成 4D 动态世界的生成物理引擎 Genesis。

生成模型真实物理引擎Genesis来了!由全球AI顶尖高校团队开发

(来源:GitHub)

一经发布,项目迅速在 X 获得数十万人关注。

Genesis 作为一个从底层重新设计和构建的通用物理引擎,其核心特点是将多种物理求解器及其耦合集成到了统一的框架中。

课题组领导者淦创教授称:“我们的方法核心是逆向工程人类心智模型,并构建由生成物理引擎驱动的机器人大脑!”

借助 GPU 加速的并行计算技术,以及优化的碰撞检测、自动休眠和接触岛等特性,Genesis 能够实现前所未有的模拟速度——在物理模拟速度方面,Genesis 比现有的 GPU 加速机器人模拟器(如 Isaac Gym/Sim/Lab、Mujoco MJX 等)快 10 到 80 倍,同时还保持了高精度的物理模拟保真度。

在单平面与 Franka 机械臂的操作场景中,其运行速度达到了 4300 万帧每秒,相当于实时运行速度的 43 万倍。对于大规模模拟场景,Genesis 还能够通过自动休眠机制加速已收敛和静态实体的模拟过程,进一步提升整体性能。

生成模型真实物理引擎Genesis来了!由全球AI顶尖高校团队开发

(来源:GitHub)

在功能特性方面,Genesis 建立了一个统一的框架,支持多种最先进的物理求解器,能够模拟广泛的材料类型和物理现象。平台不仅提供了照片级真实的光线追踪渲染功能,还支持完全可微分的模拟能力。

目前,其 MPM 求解器和工具求解器已经实现了可微分性,其他求解器的可微分功能也将陆续加入。并且,Genesis 还包含了物理精确且可微分的触觉传感器模拟。

Genesis 的另一个重要创新是将物理引擎与生成式 AI 技术相结合。平台集成了基于大语言模型的生成代理,能够根据自然语言描述自动创建各种形式的数据。例如,当用户要求生成“一个手持棍子的孙悟空小型角色在桌面上奔跑 3 秒,然后跳跃到空中”这样的场景时,Genesis 能够自动生成符合物理规律且视觉连贯的动画序列,同时智能控制相机运动,确保最佳观察视角。

在机器人控制方面,Genesis 展现出了全方位的能力。系统能够自动生成各种复杂的机器人控制策略,从四足机器人的各种步态、双足跳跃和倒立,到人形机器人的单脚跳跃,再到机械手的精细操作。例如,Genesis 能够为 24 架无人机编队生成同步起飞和翻转动作的控制策略。且在模拟环境中生成的控制策略能够成功迁移到现实世界中的机器人上。平台还支持软体机器人的模拟,能够处理蠕虫状软体机器人的运动、混合刚-软体结构的行走等复杂行为。

除了基础的物理模拟和机器人控制,Genesis 的能力还延伸到了更广泛的领域。在场景生成方面,平台能够创建包含客厅、餐厅、卫生间等完整功能空间的交互式 3D 环境。

在表情和语音生成方面,系统可以生成与文本内容匹配的面部动画和语音,并实现从中性到愤怒再到快乐等情绪的自然过渡。这种多模态生成能力为虚拟人物的创建提供了新的可能性。

目前,研究团队已经开源了底层物理引擎和模拟平台的代码(项目地址:https://genesis-embodied-ai.github.io/),生成框架部分也将在未来逐步开放。

作为一个纯 Python 开发的平台,其安装过程十分简单,还为用户提供了极其简洁友好的 API 设计。

并且,Genesis 实现了跨平台兼容,能够原生支持 Nvidia、AMD、Apple 和 Intel 的 GPU/CPU,以及 Windows、MacOS 和 Linux 等主流操作系统,这种广泛的平台支持极大地提升了其实用性。

易用、强大,或许,Genesis 真的能“开创”一个新时代,AI 离真实的物理世界,或许越来越近了。

“我认识到许多机器人学家对此方法持怀疑态度,指出设置模拟器和解决模拟与现实差距的困难。他们主张仅专注于从现实世界数据中学习。我理解这些担忧,但我坚信我们不能仅仅因为创建一个好的物理模拟器具有挑战性就绕过物理模拟器!”淦创说,“请加入创世纪社区!我们希望说服机器人界‘Generative Physics Simulator is all You Need!’”

以上内容为资讯信息快照,由td.fyun.cc爬虫进行采集并收录,本站未对信息做任何修改,信息内容不代表本站立场。

快照生成时间:2024-12-20 12:45:02

本站信息快照查询为非营利公共服务,如有侵权请联系我们进行删除。

信息原文地址:

类Sora模型能否理解物理规律?字节豆包大模型团队系统性研究揭秘
视频生成模型虽然可以生成一些看似符合常识的视频,但被证实目前还无法理解物理规律!自从 Sora 横空出世,业界便掀起了一场「视频生成模型到底懂不懂物理规律」的争论。图灵奖得主 Y
2024-11-09 09:59:00
DeepMind大模型再登Nature:8分钟预测15日天气,超顶尖物理模型
...气都能分析。在97.2%的场景中,GenCast的表现都超过了全球顶尖的中期天气预报系统ENS。不同于DeepMind之前推出的GraphCast的确定性预测
2024-12-06 09:51:00
从空间智能到具身智能,跨维践行Sim2Real AI最高效路径
...引入了全新的 4D Mesh 技术,专为动态物理仿真和数据渲染生成而设计,可统一处理刚体、软体、流体等多种对象。作为引擎的核心表达形式
2024-07-23 09:40:00
NVIDIA创始人兼首席执行官黄仁勋:生成式AI将为创作者带来加速动力
...行官黄仁勋近日在法国里维埃拉戛纳国际创意节上表示,生成式 AI 将为各行各业、各类内容的创作者带来加速动力。黄仁勋在与全球市场营销和传播服务公司 WPP 首席执行官 Mark
2023-06-27 14:31:00
《卖身契》修复记:AI重现“打工人”喜剧魅力,留住老电影的黄
...首次将AIGC视觉大模型引入到影片修复,对大模型进行了生成质量和效率等方面的算法优化。如今随着Sora等大模型在视觉领域的发展,视觉大模型不仅运用在视频生成、修改、融合和延伸
2024-04-22 20:30:00
「学术版ChatGPT」登场!Ai2打造科研效率神器OpenScholar,让LLM帮你搞定文献综述
...。模型在推理时会检索相关段落,并使用迭代式自反馈的生成方法来优化输出;搭配的专门基准ScholarQABench旨在对开放式科学问答进行现实且可重复的评估
2024-11-27 13:33:00
全面AIGC时代,豆包模型家族准备好了
...」深圳站中,豆包模型家族再次全新发布两款豆包·视频生成模型:豆包视频生成-PixelDance、豆包视频生成-Seaweed,并面向企业市场开启邀测。活动中,火山引擎总裁谭待
2024-09-26 13:49:00
Sora为何没能诞生在中国?
...常要团队里最优秀的人来做这件事。国外许多科技公司的顶尖AI人才,都会在一线亲自处理数据,写代码”。据OpenAI官网介绍,Sora的核心团队共15人。公开资料显示,团队的成立
2024-03-19 05:31:00
200余位顶尖学者和产业专家共议人工智能热点问题
...届北京智源大会在中关村展示中心开幕。200余位人工智能顶尖学者和产业专家,围绕人工智能关键技术路径和应用场景等问题展开主题演讲和尖峰对话。6月14日,第六届北京智源大会在中关
2024-06-14 22:21:00
更多关于科技的资讯:
全球设计视野:胡予彤女士的国际影响力
在这个品牌必须跨越国界与受众自如对话的时代,胡予彤女士(Ms. Hu)已不仅是一名设计师,更是一股备受瞩目的创意力量,其作品的辨识度已从纽约延伸至广阔的国际舞台
2026-02-25 20:01:00
在算力需求爆发式增长的数字时代,硅光通信技术正成为数据中心互联的关键基石。作为测试测量领域的资深专家,Kevin Pan凭借其前瞻性的产业布局和卓越领导力
2026-02-25 17:40:00
中国消费者报福州讯(记者张文章)2月24日,记者从福建省药监局获悉,近日,工业和信息化部、国家药监局联合发布了《关于公布生物医用材料创新任务揭榜挂帅(第二批)入围揭榜单位的通知》
2026-02-25 18:00:00
数字经济时代,企业如何抢占数据资产价值先机
数字经济浪潮下,数据资产化已从政策导向转向价值兑现的关键阶段,成为企业抢占未来的核心竞争力。但面对国家政策红利与市场巨大机遇
2026-02-25 18:14:00
据浙江文旅,2026年春节假期,浙江省累计接待全域游客4604.3万人次,同比增长24.7%。全域旅游综合收入679.5亿元
2026-02-25 19:28:00
在中国医药市场的细分赛道中,抗ED药物领域正经历一场静默而深刻的变革。市场规模突破90亿元,年增长率保持在近20%的高位
2026-02-25 17:05:00
浙江长兴:服务暖人心 提质促共赢
长兴县烟草专卖局秉持“服务暖人心、提质促共赢”理念,以零售户服务需求为核心,通过“定制化服务+纠纷化解赋能”双轮驱动,聚焦卷烟经营全链条服务痛点难点
2026-02-25 17:06:00
过去几年,中国消费市场正在经历一轮明显变化。一方面,流量成本持续上升,单纯依赖推广带动销量越来越难;另一方面,大量新品牌快速出现
2026-02-25 16:30:00
【新春走基层】春节长假与多种促消费政策叠加 汇川区消费市场活力十足
多彩贵州网讯今年春节,长达九天假期与政府消费券的不期而遇,为汇川区消费市场注入了强劲动力。连日来,笔者走访遵义国贸春天百货购物中心
2026-02-25 16:53:00
视频制作:陈希河北新闻网讯(记者 王嵩)方程豹钛7作为一款兼具颜值与性能的方盒子,其智能辅助驾驶系统以及云辇C+路面预瞄技术表现如何呢?本期视频,我们将 通过一场28公里的实测一
2026-02-25 15:43:00
最高免首月房租!我爱我家相寓推出“返工季”租房优惠活动
2月25日(正月初九),正值返工返岗高峰期,大量新市民、青年人陆续返程就业,租房需求集中释放。为积极响应各地返工季惠民租房号召
2026-02-25 12:09:00
春节新茶饮观察:书亦烧仙草乡镇店日均杯量1000杯,家庭聚会“喝”出新高
春节假期历来是观察新消费趋势的重要窗口。近日,书亦烧仙草对外公布新春假期战报:平均每天售出招牌烧仙草26万杯、水果奶绿25万杯
2026-02-25 11:06:00
从“渠道战”到“心智战”:白酒春节营销背后的竞争新格局
春节作为国人最重要的传统节日,历来是白酒行业消费与品牌竞争的关键节点。从早期依靠渠道铺货和价格竞争,到如今注重文化内涵与情感联结
2026-02-25 11:06:00
随着春节假期的结束,年货消费市场的全景图逐渐清晰。京东健康最新消费数据显示,新春健康消费已形成“送健康”、“管健康”、“养健康”三大鲜明趋势
2026-02-25 11:06:00