Genesis机器人仿真平台:开启机器人与物理AI的新纪元

在人工智能和机器人技术飞速发展的今天,一个名为Genesis的全新平台以其革命性的物理模拟引擎和数据生成能力,为机器人学、具身智能(Embodied AI)和物理智能(Physical AI)领域带来了突破性的进展。

近日,一个名为Genesis的综合性物理仿真平台正式对外公布。该平台由一群来自全球顶尖高校和研究机构的科学家和工程师共同开发,旨在为机器人学、具身智能和物理智能领域提供前所未有的支持。

1、Genesis平台的核心优势:
Genesis平台的核心是一个从头开始构建的通用物理引擎,它能够模拟广泛的材料和物理现象。此外,它还是一个轻量级、超快速、Pythonic和用户友好的机器人仿真平台。Genesis还集成了一个强大的照片级真实感渲染系统和一个能够将用户提示的自然语言描述转化为多种数据模态的生成性数据引擎。

2、性能优化:
Genesis平台的物理引擎利用GPU加速并行计算,具有优化的碰撞检测、自动休眠、接触岛等特性,提供了前所未有的仿真速度。在模拟一个操作场景(包含一个平面和一个Franka臂)时,Genesis的运行速度达到了43百万FPS,比实时快430,000倍。此外,Genesis还利用自动休眠功能加速静态实体的大规模仿真,这一功能将在0.1.1版本中发布。
Genesis机器人仿真平台:开启机器人与物理ai的新纪元
3、4D动态物理世界的生成:
Genesis的物理引擎通过基于VLM(可能指Virtual Linear Model)的生成性代理,使用仿真基础设施提供的API作为工具,创建4D动态世界,这些世界可以作为提取各种数据模态的基础数据源。结合生成相机和物体运动的模块,Genesis能够生成物理准确和视角一致的视频和其他数据模态。

4、角色动作生成:
Genesis平台能够根据自然语言描述生成角色动作,例如“一个手持棍棒的微型孙悟空在桌面上奔跑3秒,然后跳入空中,在着陆时挥动右臂向下”。相机从特写开始,然后稳定跟随角色,逐渐拉远。当猴子跳入空中,在跳跃的最高点,动作暂停几秒钟。相机围绕角色旋转360度,然后缓慢上升,之后动作继续。
Genesis机器人仿真平台:开启机器人与物理ai的新纪元
5、机器人策略生成:
Genesis旨在使用生成性机器人代理和物理引擎自动生成各种技能和不同场景下的机器人策略和示范数据。例如,“一个移动的Franka臂用碗和微波炉加热玉米”或“一个Unitree H1仿人机器人进行单脚跳跃”。

6、Sim2Real策略转移:
Genesis平台还展示了从仿真到现实世界(Sim2Real)的策略转移能力,包括大型和欠驱动物体的定位操作,以及四足机器人的单背翻和双背翻。

7、3D和全交互式场景生成:
Genesis能够生成包括客厅、餐厅、书房和卧室在内的家庭内部场景,以及开放世界中的关节对象生成,这些对象超出了人类注释的关节对象资产类别。
Genesis机器人仿真平台:开启机器人与物理ai的新纪元
8、软体机器人模拟:
Genesis还能够模拟软体或混合体(软皮肤和刚性骨架)机器人。例如,“一个行走的茶壶”(混合体)或“一个能够旋转盒子的夹持器”,附加在UR5上(MPM + 刚性)。

9、语音音频、面部动画和情感生成:
Genesis平台还能够生成面部动画和语音,以及情感转换,如从中性到愤怒,然后到快乐。
Genesis机器人仿真平台:开启机器人与物理ai的新纪元
关于Genesis:
Genesis是一个由全球科学家和工程师共同开发的物理仿真平台,旨在为机器人学、具身智能和物理智能领域提供支持。更多信息,请访问Genesis官方文档网站:https://genesis-embodied-ai.github.io/

AD:精心整理了2000+好用的AI工具!点此获取

相关推荐

1 1

免费AI工具合集,点击进入

AI对话

玉米AI助手