统一解释表征与知识
该交互指标将DNN的知识编码与表征能力纳入同一博弈论框架,为可解释性提供了可量化的统一度量。
Huilin, Zhou · 任洁 · Deng, Huiqi · 程学 · Jinpeng, Zhang · 张拳石
Machine Intelligence Research 2024
博弈论交互指标同时解释DNN学到的知识概念和模型的表征能力,把两个原本分开的问题统一起来。
通过为Shapley值学习最优基线值,该工作提供了一个统一视角来比较14种不同的归因方法。
该理论可以解释DNN的表征瓶颈,帮助理解模型能力受限的根本原因。
证明了交互与DNN表征能力(如泛化能力、对抗迁移性、对抗鲁棒性)之间的关系,为分析模型行为提供了新工具。