黄仁勋的新故事:"Agent工厂"里,装的是什么?
和此前的Cosmos相比,早期版本主要面向机器人和自动驾驶开发者,做的是视频生成和物理世界模拟,本质上是个相对单模态的生成框架。Cosmos 3换了一套架构——混合Transformer,首次把视觉推理、世界生成和动作预测三件事统一到了一个系统里。
它能原生理解并生成文本、图像、视频、环境声音和动作,在物理准确性上达到领先水平,是全球首个完全开放的全能模型。英伟达称,它有望把物理AI的训练和评估周期从过去的数月压缩到数天。
黄仁勋预测,得益于多模态推理语言、视觉和世界模型的突破,物理AI的大爆炸即将来临。
Cosmos 3系列开放的前沿全能模型为开发者提供了代际飞跃的能力,用于构建能够在物理世界中感知、推理、规划和行动的机器人、自动驾驶汽车和视觉AI。
06 降低Physical AI门槛
英伟达还联合宇树发布了H2 Plus:—首款基于Isaac GR00T的人形机器人参考设计。通俗来讲,它更像是一台面向研究和开发者的“开发样机”。
宇树负责机器人本体,英伟达负责软件和计算平台,两边把硬件和软件预先整合好,开发团队拿到就能直接开始做技能开发,不用自己再花时间解决底层对接问题。它也是全球首款基于NVIDIA Isaac GR00T开发平台构建的开放式人形机器人。
这款设计,瞄准的是人形机器人开发中一个长期存在的痛点:硬件集成、数据采集、仿真、训练、评估、部署,各环节各自为战,整个流程高度碎片化。
英伟达表示,研究团队拿到一个机器人本体,往往要花大量时间在底层拼凑上,真正的技能开发反而被一再推后。H2 Plus尝试做的事,就是把这条路打通,让研究团队跳过底层集成,直接进入技能开发和真实场景验证。
在黄仁勋看来,人形机器人将为全球最大的产业带来物理AI,开启数万亿美元的经济机遇,而H2 Plus就是把前沿研究往工厂、仓库、物流系统这些真实场景推进的起点。
此外,英伟达还宣布,正式开源一套物理AI Skills(技能)工具集,覆盖机器人、自动驾驶、视觉AI和工业数字孪生等核心场景。
所谓“技能”,可以理解为英伟达把自己旗下的Cosmos、Omniverse、Isaac、Metropolis等平台的使用方式标准化之后,写成了智能体可以直接读懂、直接执行的操作指令,这些指令打包开源出来,就是这次发布的工具集。
智能体接到一个任务,比如生成一批检测缺陷的训练数据,它就知道该调用哪个模型、输出什么格式、怎么验证结果,整个过程自动跑完,不需要人一步步去操作每个环节。
07 升级AI存储:从“跑得快”到“管得住”
在3月份的圣何塞GTC上,英伟达发布了Vera BlueField-4 STX,当时黄仁勋重点讲的是“AI原生存储架构”,核心卖点是为智能体长上下文推理提供高性能KV Cache存储支撑。
现在,英伟达在STX基础上宣布新增一套安全能力,重点从“存储性能”变成了“存储安全”。
这里的核心逻辑和思考,是因为背景是企业AI的使用方式在变化。现在很多企业都积极部署智能体,当Agent接入企业系统,在无人直接监督的情况下持续读写、跨系统共享信息——谁在访问什么数据、有没有越权、有没有泄露,这都是企业头疼的问题。
英伟达的解法是,在加速存储的基础上加了一层安全能力——靠着一套统一的 NVIDIA DOCA 安全软件,以及在 BlueField-4 芯片里直接硬性执行策略,基于 STX 的平台可以实时检查和管控代理、数据和上下文记忆之间的互动,帮企业在 AI 数据路径上实现持续的策略执行。
黄仁勋解释称:“智能体把企业数据变成了一个实时、活生生的系统,而这个系统必须在数据移动之处、上下文存储之处、智能体行动之处都得到保护。Vera BlueField-4 STX要做的,就是用天生安全的设计,在芯片中以AI的速度执行信任”。
08 与台积电“互为供应商”
这次大会中,非常有意思的一个点是英伟达和台积电的合作——目前,台积电正利用NVIDIA技术提升先进晶圆厂的周转时间、能效、良率与运营生产力。
台积电和英伟达的关系,过去三十年只有一种形态:台积电帮英伟达造芯片。但现在,角色发生了微妙的变化,英伟达开始帮台积电“管工厂”。
黄仁勋表示:“英伟达和台积电已合作近三十年,不断推动计算的极限。台积电正在将英伟达的AI和加速计算引入晶圆厂内部,通过仿真、优化和AI应对全球最复杂的设计和制造挑战,以提高下一代芯片的速度、效率和良率。”
[加西网正招聘多名全职sales 待遇优]
还没人说话啊,我想来说几句
它能原生理解并生成文本、图像、视频、环境声音和动作,在物理准确性上达到领先水平,是全球首个完全开放的全能模型。英伟达称,它有望把物理AI的训练和评估周期从过去的数月压缩到数天。
黄仁勋预测,得益于多模态推理语言、视觉和世界模型的突破,物理AI的大爆炸即将来临。
Cosmos 3系列开放的前沿全能模型为开发者提供了代际飞跃的能力,用于构建能够在物理世界中感知、推理、规划和行动的机器人、自动驾驶汽车和视觉AI。
06 降低Physical AI门槛
英伟达还联合宇树发布了H2 Plus:—首款基于Isaac GR00T的人形机器人参考设计。通俗来讲,它更像是一台面向研究和开发者的“开发样机”。
宇树负责机器人本体,英伟达负责软件和计算平台,两边把硬件和软件预先整合好,开发团队拿到就能直接开始做技能开发,不用自己再花时间解决底层对接问题。它也是全球首款基于NVIDIA Isaac GR00T开发平台构建的开放式人形机器人。
这款设计,瞄准的是人形机器人开发中一个长期存在的痛点:硬件集成、数据采集、仿真、训练、评估、部署,各环节各自为战,整个流程高度碎片化。
英伟达表示,研究团队拿到一个机器人本体,往往要花大量时间在底层拼凑上,真正的技能开发反而被一再推后。H2 Plus尝试做的事,就是把这条路打通,让研究团队跳过底层集成,直接进入技能开发和真实场景验证。
在黄仁勋看来,人形机器人将为全球最大的产业带来物理AI,开启数万亿美元的经济机遇,而H2 Plus就是把前沿研究往工厂、仓库、物流系统这些真实场景推进的起点。
此外,英伟达还宣布,正式开源一套物理AI Skills(技能)工具集,覆盖机器人、自动驾驶、视觉AI和工业数字孪生等核心场景。
所谓“技能”,可以理解为英伟达把自己旗下的Cosmos、Omniverse、Isaac、Metropolis等平台的使用方式标准化之后,写成了智能体可以直接读懂、直接执行的操作指令,这些指令打包开源出来,就是这次发布的工具集。
智能体接到一个任务,比如生成一批检测缺陷的训练数据,它就知道该调用哪个模型、输出什么格式、怎么验证结果,整个过程自动跑完,不需要人一步步去操作每个环节。
07 升级AI存储:从“跑得快”到“管得住”
在3月份的圣何塞GTC上,英伟达发布了Vera BlueField-4 STX,当时黄仁勋重点讲的是“AI原生存储架构”,核心卖点是为智能体长上下文推理提供高性能KV Cache存储支撑。
现在,英伟达在STX基础上宣布新增一套安全能力,重点从“存储性能”变成了“存储安全”。
这里的核心逻辑和思考,是因为背景是企业AI的使用方式在变化。现在很多企业都积极部署智能体,当Agent接入企业系统,在无人直接监督的情况下持续读写、跨系统共享信息——谁在访问什么数据、有没有越权、有没有泄露,这都是企业头疼的问题。
英伟达的解法是,在加速存储的基础上加了一层安全能力——靠着一套统一的 NVIDIA DOCA 安全软件,以及在 BlueField-4 芯片里直接硬性执行策略,基于 STX 的平台可以实时检查和管控代理、数据和上下文记忆之间的互动,帮企业在 AI 数据路径上实现持续的策略执行。
黄仁勋解释称:“智能体把企业数据变成了一个实时、活生生的系统,而这个系统必须在数据移动之处、上下文存储之处、智能体行动之处都得到保护。Vera BlueField-4 STX要做的,就是用天生安全的设计,在芯片中以AI的速度执行信任”。
08 与台积电“互为供应商”
这次大会中,非常有意思的一个点是英伟达和台积电的合作——目前,台积电正利用NVIDIA技术提升先进晶圆厂的周转时间、能效、良率与运营生产力。
台积电和英伟达的关系,过去三十年只有一种形态:台积电帮英伟达造芯片。但现在,角色发生了微妙的变化,英伟达开始帮台积电“管工厂”。
黄仁勋表示:“英伟达和台积电已合作近三十年,不断推动计算的极限。台积电正在将英伟达的AI和加速计算引入晶圆厂内部,通过仿真、优化和AI应对全球最复杂的设计和制造挑战,以提高下一代芯片的速度、效率和良率。”
[加西网正招聘多名全职sales 待遇优]
| 分享: |
| 注: | 在此页阅读全文 |
| 延伸阅读 |
推荐:



