无需人工标注
一种基于学习的会话头部生成视频评估指标,能够跨维度拟合人类偏好,对未见数据鲁棒且泛化,无需人工标注即可用于定量评估。
Zhou, Mohan · Bai, Yalong · Zhang, Wei · Yao, Ting · 赵铁军 · Mei, Tao
2023
PS基于多维定量评估直接拟合人类偏好,使用时无需进行耗时的人工标注或用户研究,显著降低评估成本。
实验验证PS与人类偏好判断高度一致,能更可靠地反映生成视频的真实质量,优于仅看有限维度的传统指标。
PS对训练时未见过的新数据依然表现出鲁棒性和泛化性,可直接应用于新的会话头部生成模型或数据集,无需重新训练。