主动提示链式思维方法

任务自适应样例

一种为不同任务动态选择最优思维链示例的提示方法,通过不确定性度量筛选待标注问题,在多个复杂推理任务上取得领先性能。

Diao, Shizhe · Pengcheng, Wang · Yong, Lin · Rui, Pan · Xiang, Liu · Zhang, Tong

2024

参数信息

性能提升任务数
8

技术优势

示例自动适配任务

通过不确定性度量从任务池中选出最不确定的问题进行人工标注,生成的示例针对当前任务优化,避免固定示例不适配的问题。

标注成本花在刀刃上

只标注模型最不确定的问题,减少人工标注开销,同时提升示例的有效性。

多任务验证有效

在八个复杂推理任务上取得优越性能,证明方法在不同任务上的泛化能力。

应用场景