眼科手术视频基础模型

实时手术导航

在自监督视频Transformer基础上，通过知识蒸馏实现轻量化，可在手术显微镜上实时运行。

Tu, Puxun · Zheng, Ce · Xie, Xiaoling · Lv, Jiao · Meng, Xie · Jinming, Guo · Yin, Shengjie · 邱坤良 · Mi, Wei · Wang, Yafu · Zhang, Xiao · 张婉琪 · Tong, Fengfeng · 赵培泉 · 张铭志 · Chen, Xiao-Jun

Nature Biomedical Engineering 2026

参数信息

训练数据规模

1.1 M

下游任务数

7

技术优势

实时可用

通过知识蒸馏缩小模型体积且保持精度，可直接部署在手术显微镜上，满足术中实时识别与导航需求。

缩小技能差距

在10名外科医生进行的猪眼白内障手术中，OVFM驱动的系统增强了手术表现并缩小了技能差距，有助于提升不同经验水平医生的手术质量。

应用场景

• 手术导航：实时识别手术阶段和关键结构，为术中导航提供视觉引导。
• 手术机器人感知：为手术机器人提供视频感知能力，提升自主操作的场景理解。
• 显微手术辅助：增强显微手术中的实时识别，辅助医生进行精细操作。
• 手术视频分析：自动分析手术视频，提取关键事件和指标用于培训和审计。