事件识别多模态网络

不确定感知跨模态对齐

利用事件数据的高时间分辨率特性,通过视觉不确定性动态调节语义检索深度,实现多模态互补推理,在稀疏异步数据下仍能稳定识别动作。

张嘉超 · Tao, Luo · Meiqi, Cao · Xueyi, Zhao · 舒祥波

Information Fusion 2027

技术优势

不确定性可量化

通过概率建模估计视觉特征的不确定性,让模型知道哪些区域不可靠,从而指导后续的语义检索。

检索深度自适应

视觉不确定性动态调节文本检索的广度,不确定性高时检索更细粒度的运动学描述,实现互补推理。

应用场景