SLIQ-ViT量化模型

低比特高效部署

一个结合PTQ与轻量QAF的混合量化框架,应对ViT激活分布非高斯性与低比特精度损失。

Ruiting, Sun · Honglu, He · 张冠文 · 周巍

Expert Systems with Applications 2026

参数信息

准确率仅下降
0.3 %
降不
1.0 %
模型大小减少
12 倍

技术优势

量化不掉点

通过 MLS/SLG 与 BSL 量化器精确映射幂律和离群分布,结合敏感度引导的混合精度策略全局优化比特分配。

应用场景