多维动态修剪

修剪68%计算量仅掉0.07%精度

模糊掩码同时修剪空间和通道冗余，训练后转换为稀疏矩阵乘法加速推理

Shao M. · Kuang, Jiandong · 王超 · 左旺孟 · Guoyin, Wang

IEEE Transactions on Fuzzy Systems 2024

参数信息

修剪

68 %

技术优势

修剪更彻底

同时沿通道和空间两个维度动态识别并修剪冗余，相比单维修剪能更充分地挖掘网络中的可压缩部分。

真正加速推理

测试时将特征和卷积核转换为矩阵并进行稀疏矩阵乘法，避免了仅训练时掩码但推理不加速的问题。

应用场景

• 模型压缩：以极小精度损失大幅降低模型计算量，适合部署资源受限场景。
• 边缘AI芯片：稀疏卷积可映射到矩阵乘法，便于在边缘芯片上实现低功耗推理。
• 推理加速：测试阶段直接执行稀疏计算，避免掩码开销，有效提升推理速度。