英伟达升级Cosmos世界模型,为机器人打造智能“大脑”并推新服务器

08-13 07:09

老黄对机器人的看好并非空谈!


在正在举办的SIGGRAPH(计算机图形学)大会上,英伟达为机器人带来了全新升级的Cosmos世界模型



Cosmos主要用于生成符合现实世界物理规律的合成数据,自发布后,已被Figure、Agility Robotics、通用汽车等众多知名机器人和自动驾驶公司采用。


此次升级重点集中在规划能力生成速度两方面:


  • 推出Cosmos Reason:这是一款70亿参数、具备推理能力的视觉语言模型,可助力机器人进行任务规划。
  • 新增Cosmos Transfer - 2&精简版:能加速将虚拟场景转化为训练数据,还提供了更快的轻量化版本。

除软件更新外,英伟达还对机器人开发配套技术与硬件进行了全面升级,涵盖全新的Omniverse库、RTX PRO Blackwell服务器,以及DGX Cloud云平台等。


英伟达人工智能研究副总裁Sanja Fidler表示:


AI正在提升我们的模拟能力,而模拟能力也在推动AI系统的发展。这两个领域之间存在着真实而强大的结合,这种结合很少有人能做到。



如今,英伟达凭借一整套机器人开发基础设施,全力冲击这一融合新高地。



软硬件都更新了


先来看具体更新内容。


软件层面,仅7B大小的Cosmos Reason值得关注。


官方称,该模型不仅有扎实的物理理解能力,还能运用常识进行多步推理,可作为机器人的“大脑”。


通过记忆和推理,它可以作为一个规划模型,推理实体Agent下一步可能采取的步骤。



同时,英伟达推出了加速合成数据生成的Cosmos Transfer - 2及其更轻量的精简版,大幅缩短了从虚拟场景或空间控制信息到训练数据的转换时间。


精简版将70步蒸馏过程简化为1步,能在RTX PRO服务器上更高速运行。


为配合这些模型,英伟达发布了功能更强大的Omniverse新库与SDK,支持机器人开发者更便捷地进行三维重建、仿真及跨平台数据互通,具体如下:


1、实现了MuJoCo和OpenUSD这两种机器人仿真格式的数据兼容,方便大量开发者在不同平台间进行机器人模拟。


2、引入Omniverse RTX光线追踪和3D高斯渲染技术,使开发者能利用传感器数据以三维形式捕捉、重建并模拟现实世界。


3、在GitHub开源机器人仿真和学习工具Isaac Sim 5.0与Isaac Lab 2.2,结合新渲染技术和统一的数据格式,帮助机器人开发者缩小虚拟仿真和现实环境的差距。


总之,Cosmos + Omniverse这对黄金搭档(前者构建逼真、高效的三维仿真和数字孪生环境,后者专注提供强大的物理AI模型和智能推理能力)结合,能为机器人训练生成更精确、大规模的数据。


解决数据问题后,还有硬件问题。


为此,英伟达专门推出了RTX PRO Blackwell服务器,覆盖训练、合成数据生成、机器人学习与仿真等工作负载。


借助DGX Cloud,开发者可随时随地通过云端高效运行Omniverse和Cosmos相关应用,轻松实现大规模仿真与训练任务,降低了硬件门槛和运维成本。(目前DGX Cloud已上线微软云市场)


英伟达全力押注机器人领域


从上述动作可知,英伟达正大力布局机器人研发领域。


官方在一篇最新博客中介绍了背后考量,总结为:


计算机图形与AI正在融合,将从根本上改变机器人领域




以图形学发家的英伟达,看到图形学和AI融合趋势及其对机器人领域的重要影响,选择将机器人作为下一个关注重点。


例如,传统机器人训练依赖现实数据,获取成本高且受限,而计算机图形技术可打造逼真的虚拟环境,结合AI实现物理精确的仿真。


这样能降低机器人学习技能的门槛和成本,加速机器人落地应用。


英伟达研究副总裁Ming - Yu Liu认为,英伟达的目标是构建一个完整、逼真且可扩展的“虚拟平行宇宙”,让机器人能在其中安全反复试验、不断进化


物理AI需要一个逼真的虚拟环境,让机器人能够在这个安全的平行世界中反复试验、不断学习。


要打造这样一个虚拟世界,我们必须结合实时渲染、计算机视觉、物理运动模拟,以及2D和3D生成式AI与AI推理技术。这些正是英伟达研究团队过去二十年持续专注和不断打磨的核心领域。



显然,“机器人虚拟世界”构建成功后,英伟达能将这套基础设施赋能更多开发者和企业,助其开发各种机器人和AI应用。


如此,英伟达既能稳固在图形领域的领先地位,又能在具身智能时代继续扮演“卖铲人”角色。


而且从老黄近期公开动作看,他对中国机器人颇为偏爱。


他不仅在各种场合夸赞,还像早期给OpenAI送超算一样,将首批Jetson Thor芯片送到国产玩家银河通用手中。


此外,英伟达还与阿里云、北京人形机器人创新中心、傅利叶、加速进化、优必选、智元机器人等企业达成深度合作。阿里云宣布,英伟达全栈机器人及物理AI组件已通过其云端服务开放使用。


可以说,英伟达在国内卖机器人铲子的生意渐入佳境。


Cosmos开源地址:https://github.com/nvidia - cosmos


参考链接:


[1]https://techcrunch.com/2025/08/11/nvidia-unveils-new-cosmos-world-models-other-infra-for-physical-applications-of-ai/


[2]https://investor.nvidia.com/news/press-release-details/2025/NVIDIA-Opens-Portals-to-World-of-Robotics-With-New-Omniverse-Libraries-Cosmos-Physical-AI-Models-and-AI-Computing-Infrastructure/default.aspx


本文来自微信公众号“量子位”,作者:一水,36氪经授权发布。


本文仅代表作者观点,版权归原创者所有,如需转载请在文中注明来源及作者名字。

免责声明:本文系转载编辑文章,仅作分享之用。如分享内容、图片侵犯到您的版权或非授权发布,请及时与我们联系进行审核处理或删除,您可以发送材料至邮箱:service@tojoy.com