Beam Search
保留多个候选序列并扩展最优者。
概览
束搜索会同时扩展多个部分序列,并保留得分最高的那些,而不是在每一步都锁定所选的词元。它解决了贪心解码可能局部最优而全局较差的问题。它作为翻译和摘要任务的默认方法存在,并且对于开放式生成,它往往会产生平淡的文本。
技术图谱
Beam Search 如何与技术栈的其他部分相连。
替代方案
-
Top-p Sampling
technique
Beam Search 的替代方案 · source
对比
与上述替代方案的逐项对比。