智元发布开源仿真平台 Genie Sim 3.0
智元机器人发布首个大语言模型驱动的开源仿真平台——Genie Sim 3.0。基于NVIDIA Isaac Sim ,Genie Sim 3.0融合三维重建与视觉生成,打造数字孪生级的高保真环境;首创大语言模型驱动的场景泛化技术,让万级场景的生成只需几分钟。 精准重建:依托 MetaCam手持3D激光扫描仪,结合高分辨率RGB、360° LiDAR点云与厘米级RTK定位,实现对真实环境的毫米级精准复刻。 视觉增强:利用视觉生成模型,智能合成新视角图像增强3D重建,极大提升了仿真环境的视觉逼真度。 资产生成:对于任意物体,仅需一段60秒环拍视频,即可快速生成带精确网格的仿真模型,大幅提升场景构建效率。 在 Genie Sim 3.0 平台中,开发者输入自然语言指令即可驱动平台在分钟级内自动生成、泛化成千上万个训练与测试场景。 对话式创建:直接输入指令「生成一份蛋白质和维生素含量丰富的晚餐」,平台自动理解并构建出结构化的仿真场景。 智能编辑与泛化:生成场景自带结构化信息与视觉预览,可进一步通过对话进行场景增广、细节增删、布局调整,最终输出满足要求的仿真场景。 智元还将开源包含真实机器人作业...
