跨模态语义对齐
一种多模态摘要网络，通过模态感知对比学习保留各模态特有语义并促进互补整合，在多个基准上取得最优性能。
Lixin, Dai · Han, Tingting · 余宙 · 俞俊 · 谭敏 · Liu, Yang
Neurocomputing 2025
通过动态调整单模态与跨模态输出的贡献，MCF网络实现更优的融合效果。
通过对比学习最小化模态感知损失，增强语义表征的区分度。