
前沿资讯
1754978602更新
1
在SIGGRAPH 2025图形大会上,英伟达宣布推出全新英伟达Omniverse库、英伟达Cosmos世界基础模型(WFM),以及面向机器人学工作负载的AI计算基础设施,为全球开发者提供涵盖仿真、数据生成与推理的完整工具链。
借助新发布的英伟达RTX PRO Blackwell服务器与英伟达DGX Cloud,开发者无论身在何处,都能构建高保真数字孪生、实时重建真实世界、大规模生成合成训练数据,并训练真正“懂物理”的AI智能体。
“计算机图形学与AI正走向融合,从根本上重塑机器人,”英伟达Omniverse与仿真技术副总裁Rev Lebaredian(雷夫·莱巴雷迪安)表示,“当AI推理遇上可扩展、物理精准的仿真,明天的机器人和自动驾驶汽车将在数万亿美元级的产业中掀起变革。”
一、Omniverse新库:把真实世界“搬进”仿真
1、全新Omniverse SDK实现MuJoCo(MJCF)与OpenUSD数据互通,25万名机器人学习开发者得以跨平台无缝仿真。
2、Omniverse NuRec库首发3D Gaussian Splatting神经渲染,支持RTX实时光追,仅用传感器数据即可快速捕获并重建大规模3D场景。
3、开源框架升级:
‑ Isaac Sim 5.0与Isaac Lab 2.2已在GitHub上线,新增NuRec神经渲染、OpenUSD机器人/传感器模式,显著缩小“仿真-现实”差距。
‑ CARLA开源自动驾驶模拟器、Foretellix合成数据平台、Voxel51 FiftyOne数据引擎已原生集成NuRec,分别被福特、保时捷等客户采用。
4、Boston Dynamics、Figure AI、Hexagon、Amazon Devices & Services等已率先将Omniverse库与Isaac生态系统用于制造、仓储、下一代机器人原型设计。
二、Cosmos世界模型:一句话生成“训练宇宙”
下载量已破200万的Cosmos WFM再升级,为机器人提供“世界生成引擎”。
● 即将推出的Cosmos Transfer-2可从3D场景或深度、分割、HD Map等空间控制输入中一键生成照片级合成数据,支持多语种提示。
● 蒸馏版Cosmos Transfer把原本70步的推理压缩至单步,在RTX PRO服务器上实现前所未有的实时性能。
● Lightwheel、Moon Surgical、Skild AI正使用Cosmos Transfer大规模模拟复杂环境,加速手术机器人、仓储机器人等“物理AI”训练。
三、Cosmos Reason:7B参数“物理大脑”
针对机器人多步任务、模糊场景及零样本环境的痛点,英伟达发布开源Cosmos Reason——70亿参数的可定制推理VLM。
● Uber已将其引入自动驾驶训练管线,用于自动数据标注与精选。
● 作为机器人VLA(视觉-语言-动作)模型的决策中枢,Cosmos Reason让机器人像人类一样结合常识与物理规律拆解复杂指令。
● Magna City Delivery平台正集成Cosmos Reason,使无人配送车辆“一日适应一座新城”。
● VAST Data、Milestone、Linker Vision等借助Cosmos Reason实现城市级交通监控、工业质检与安全管理。
四、AI基础设施与开发者生态
● RTX PRO Blackwell服务器:单架构覆盖训练、合成数据生成、机器人学习与仿真全链路,性能与能效双突破。
● DGX Cloud(已上架Microsoft Azure Marketplace):为Omniverse开发者提供全托管、可扩展的OpenUSD/RTX云端流式平台,Accenture、Hexagon成为首批用户。
● 人才培养与开源合作:推出OpenUSD课程与认证,并与Lightwheel合作将机器人策略训练与评估框架整合进Isaac Lab。
本次发布不仅为机器人和物理AI开发提供了更高效的工具链与算力支持,也通过开源与产业协作,加速了3D仿真与智能体技术在制造、自动驾驶、工业检测等领域的落地进程。
参考资料:https://nvidianews.nvidia.com/news/nvidia-opens-portals-to-world-of-robotics-with-new-omniverse-libraries-cosmos-physical-ai-models-and-ai-computing-infrastructure