ID查询并发传播视频分割

交互提速3倍

首个允许用户在多个帧上自由标注多个对象、并以ID查询机制并发处理的交互式视频对象分割方法,以极轻量模型实现最先进性能。

Kexin, Li · Tao, Jiang · Yang, Zongxin · Yi, Yang · 庄越挺 · 肖俊

IEEE Transactions on Circuits and Systems for Video Technology 2024

参数信息

分割精度 (J&F@60)
89.6 %
速度提升
3

技术优势

跨帧多点标注

用户可以在多个帧上自由标注多个对象,无需逐一处理每个帧。

多物体并发处理

ID 查询机制能同时处理多个对象,避免逐个对象依次处理带来的额外开销。

推理速度快

采用截断重传播策略,显著提升了运行速度,在多物体场景中比领先方法快 3 倍以上。

模型轻量

用跨轮记忆模块替换了之前的多轮融合模块,减少了模型复杂度和内存消耗。

应用场景