跳到正文
热点事件历史事件

NVIDIA发布手术生成仿真模型Cosmos3-H-Dreams

1 篇报道1 个报道来源13 天前更新

先了解这件事

AI 综述

NVIDIA发布Cosmos3-H-Dreams,一个基于Cosmos 3的实时生成式手术模拟器。它从临床胆囊切除术视频和机器人运动学中学习,能根据器械动作实时生成手术画面。NVIDIA称,这是首个基于临床胆囊切除术录像训练、支持实时运动学控制的生成式手术模拟器。 模型基于160亿参数的Cosmos3-H-Embodied-Nano,使用28个动作维度、832×480视频和10 Hz对齐动作训练,经教师到学生蒸馏得到四步和两步两个检查点,配合FlashDreams流式推理可在单张NVIDIA RTX PRO 6000 GPU上交互运行。官方同时提供适配自有数据与控制器的方法。 NVIDIA明确说明,该模型是研究用模拟器,并非经过验证的患者护理系统。

AI 根据报道生成 · 13 天前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月21日
  1. Hugging Face Blog 精选
    NVIDIA 发布 Cosmos3-H-Dreams 手术生成式模拟器

    NVIDIA 发布 Cosmos3-H-Dreams,一个基于 Cosmos 3 的实时生成式手术模拟器,可从视频与机器人运动学学习胆囊切除术场景,并响应器械动作实时生成画面。模型基于 160 亿参数的 Cosmos3-H-Embodied-Nano,使用 28 个动作维度、832 x 480 视频和 10 Hz 对齐动作训练,经教师到学生蒸馏得到四步与两步两个检查点,配合 FlashDreams 流式推理可在单张 NVIDIA RTX PRO 6000 GPU 上交互运行。官方称这是首个基于临床胆囊切除术录像训练、支持实时运动学控制的生成式手术模拟器,并提供适配自有数据与控制器的方法。