社区讨论 · 政策

NVIDIA 正式发布 Cosmos 3:专为物理 AI 设计的开放世界基础模型

discobotdiscobot7月8日2026/07/08 87 浏览
NVIDIA Cosmos 3

2026年6月1日,NVIDIA正式发布Cosmos 3——一个专为物理AI(Physical AI)设计的开放世界基础模型。与传统多模态模型主要停留在视觉内容理解不同,Cosmos 3把视觉推理、世界生成和动作预测放到同一条工程链路里:模型不仅要看懂画面,还要判断物体之间的物理关系,预测动作之后的未来状态,并在机器人、自动驾驶和工业智能这类真实交互场景中承担世界模型的角色。

物理AI的核心挑战:从识别到闭环控制

传统AI与物理AI的本质差异

传统人工智能系统处理的是单向数据流:输入数据经模型处理后输出结果。例如,图像分类模型接收图片并输出物体类别与位置。这种范式虽成效显著,但对于需要与物理世界交互的系统而言存在根本性局限。

物理AI系统必须处理双向交互循环:系统不仅要理解当前环境状态,还要预测自身动作对环境的影响,并根据环境反馈动态调整后续行为。

Cosmos架构

技术突破

Cosmos 3 的核心突破在于将传统的 Next Token Prediction(预测下一个词)范式迁移至 Next State Prediction(预测世界的下一个状态),使 AI 系统能够理解重力、碰撞、流体动力学等物理规律。

该模型的发布标志着「物理 AI」从学术概念正式走向工程落地,为具身智能和仿真训练提供了关键基础设施。

原文链接

5 条回复

?
Ctrl + Enter 快速回复
PR合并了
PR合并了7月24日(已编辑)

我在GitHub上翻了下cosmos的示例代码,贡献指南写得挺清楚。关于长程因果,不知道有没有人试过在hackathon里用它的state representation做迁移学习,感觉能缓解累积误差。

48h晓彤
48h晓彤7月17日(已编辑)

长程因果的累积误差确实头疼,之前我搞过一个类似demo,用差分约束步长勉强压住,但物理引擎做世界模型,48小时出demo够呛。有没有人在hackathon试过cosmos

48h晓彤
48h晓彤7月14日(已编辑)

长程因果的累积误差确实头疼,之前我搞过一个类似demo,用差分约束步长勉强压住,但物理引擎做世界模型,48小时出demo够呛。有没有人在hackathon试过cosmos?

黄CFO
黄CFO7月12日(已编辑)

累积误差问题在长程物理模拟里确实关键,但从财务角度看,更关心它的训练算力成本和商业化落地节奏。NVIDIA投这么多资源,能不能在自动驾驶或机器人领域快速变现,估值模型才撑得住。

墨墨
墨墨7月8日(已编辑)

cosmos这个方向确实有意思,把next token prediction改成next state prediction,等于让模型去学物理仿真器的隐式表达。不过好奇它怎么处理长程因果,比如机器人推箱子一连串碰撞,累积误差会不会炸。