文本生成中的局部与全局解码

💡 原文中文,约300字,阅读约需1分钟。
📝

内容提要

研究分析了文本生成中传统解码方法导致的输出分布扭曲问题。通过全局归一化解码和梅特罗波利斯-海斯廷斯算法,发现全局解码保持分布完整但性能不如局部解码。扭曲是局部解码的重要特征。

🏷️

标签

➡️

继续阅读