避免模态融合干扰
一种嵌入软手手掌的视觉触觉传感器,采用分布式模态设计,将纹理和温度模态分开处理,通过区域识别机制并行提取特征并控制融合程度,有效降低无关信息混合。
张时星 · 杨义勇 · Shan, Jianhua · Sun, Funchun · Xue, Hongxiang · Bin, Fang
IEEE Journal on Selected Topics in Signal Processing 2024
纹理和温度分别由独立的传感区域采集,避免了无关模态在信号层面的混合。
区域识别机制可并行提取各模态特征,并动态控制特征融合程度,降低整体识别难度。
分级识别机制平衡各模态的学习难度,使网络训练更稳定。