资讯›热点›正文

英伟达发布Cosmos3-H-Dreams,单卡实时生成手术模拟视频

候鸟南迁 2026-10-21 07:51 阅读 9 热点
英伟达于10月20日发布Cosmos3-H-Dreams,首个基于临床胆囊切除记录训练、支持实时运动学控制的生成式手术模拟世界模型。该模型基于Cosmos 3与FlashDreams流式推理库,可在单张RTX PRO 6000显卡上交互运行。

英伟达于10月20日发布Cosmos3-H-Dreams,这是一个动作可控的实时生成式世界模型,专为机器人手术模拟打造。据英伟达介绍,这是首个基于临床胆囊切除记录训练、并支持实时运动学控制的生成式手术模拟器。

英伟达发布Cosmos3-H-Dreams,单卡实时生成手术模拟视频

该模型在CMR Surgical Versius平台的临床手术视频与机械臂运动学数据上训练,基于Cosmos 3基础架构,并借助英伟达自研的FlashDreams流式推理库加速。在单张RTX PRO 6000 Blackwell显卡上,模型可以交互式运行:给定初始画面与器械动作指令,即可实时生成连贯的手术场景视频。

技术上,Cosmos3-H-Dreams采用教师到学生的蒸馏管线,将双向教师模型蒸馏为可按动作块自回归生成的流式学生模型,四步与两步两个版本分别权衡画质与速度。英伟达将其定位为外科机器人策略评估、遥操作探索与合成数据生成的科研平台,而非临床诊疗或实体手术控制器。

从行业背景看,物理AI正从桌面级仿真走向真实临床场景,实时世界模型有望缓解机器人实验对稀缺硬件与动物、尸体实验室的依赖。不过,英伟达也强调,生成画面的视觉逼真只是验证起点,模型是否真正遵循解剖与器械控制指令,仍需闭环基准检验。

读者评论 (0)

想参与讨论?请 登录 后发表评论。

还没有评论,欢迎抢沙发!