训练步数与标注更少
采用预训练跨度检测器与大型语言模型参照,显著降低重复训练和样本依赖。
Chang, Tian · Yin, Wenpeng · Dan, Li · Moens, Marie Francine
IEEE Access 2024
跨度检测器由开放域预训练模型初始化,直接具备基本跨度特征,无需在任务上从头学习。
实体类型参照由大语言模型生成,不受每个类型标注样本数量限制。
预训练初始化使得模型只需较少训练步数即可达到较好性能。