NVIDIA 7 月 27 日通过其官方 Hugging Face 组织发布 Cosmos-H-Dreams,一套面向手术机器人的实时、动作条件生成模拟器。系统把 Cosmos-H-Surgical-Simulator 蒸馏成因果少步学生模型,并通过 FlashDreams 流式推理库接收初始 RGB 帧和机器人运动学输入,持续生成后续场景。发布版本聚焦 da Vinci Research Kit 的桌面缝合任务。
官方称,标准模拟器约每秒 10 帧,而 Cosmos-H-Dreams 借助流式 KV cache、CUDA Graph 和模型编译,在单张 NVIDIA RTX PRO 6000 上达到约 160 fps。项目同时开放代码、模型、数据和适配指南,可通过浏览器、WebXR 控制器或学习策略进行闭环交互。这个速度数字来自 NVIDIA 指定硬件与实现,其他环境需要独立复测。
更重要的边界是:官方明确把它定位为研发平台,不是诊断系统、术中影像替代品,也不是实体手术机器人的控制器。模拟画面是否正确响应动作、长期保持结构并能迁移到真实机器人仍需新的闭环基准验证,因此不能把实时生成速度等同于医疗安全性或实体控制可靠性。