抗腐蚀视觉Transformer

通过重叠补丁嵌入与条件数据增强,增强了ViT对各种天气和光照干扰的鲁棒性。

Rui, Tian · 吴祖煊 · Dai, Qi · Goldblum, Micah · 胡瀚 · Jiang, Yugang

IEEE Transactions on Multimedia 2024

技术优势

重叠嵌入更稳

重叠补丁嵌入使模型对输入腐蚀更具鲁棒性,在常见腐蚀基准上表现更好。

卷积前馈也有效

卷积前馈网络与重叠补丁嵌入类似,同样能提升ViT对腐蚀的鲁棒性。

动态增强最佳

条件动态增强根据输入图像生成增广参数,在常见腐蚀上取得最先进鲁棒性。

应用场景