多模态知识编辑基准

8任务双指标

整合八个多模态任务,以知识泛化与保持双指标评估编辑方法对域内样本的影响,无需依赖合成数据。

Yaohui, Ma · 洪晓鹏 · 张世周 · Li, Huiyun · Zhilin, Zhu · Wei, Luo · Ma, Zhiheng

2025

参数信息

任务数量
8
指标数量
2

技术优势

评估更全面

涵盖八个多样化任务,来自多个数据集,避免仅关注单一狭窄任务。

不靠合成数据

新指标 KGI 和 KPI 直接评估域内样本,不依赖 AI 合成样本,减少潜在偏差。

提供基线方法

提出 HICE 基线方法,采用两阶段策略平衡各项指标。

应用场景