进化稀疏共享网络

精准移除负迁移

该方法通过进化多任务优化自动学习稀疏共享表示,为每个任务生成最优子网络,有效避免任务间负迁移并减少冗余特征。

Yayu, Zhang · Qian Y. · Ma, Guoshuai · 梁新彦 · Liu, Guoqing · 张青富 · 唐珂

IEEE Transactions on Evolutionary Computation 2023

技术优势

负迁移可被切除

该方法能识别并移除负相关特征,从而消除任务间的不利干扰。

推理模型更小

每个任务只保留最优稀疏共享子网络,相比其他方法推理模型尺寸更小。

性能不降反升

尽管模型更稀疏,学习性能仍优于相关方法,表明稀疏化没有牺牲精度。

应用场景