学习对比的概念嵌入用于手势识别
💡
原文中文,约300字,阅读约需1分钟。
📝
内容提要
通过最大化同一文本最小扰动嵌入之间的对齐,以及在更广泛的语料库中鼓励嵌入的均匀分布,基于对比学习的各种方法已被提出来从未标记的数据中学习文本表示。本工作提出了一种新的方法来最大化文本和其短语成分组成之间的对齐,并在语义文本相似性任务上取得了相当的基线改进。此外,这项工作是第一个不需要额外网络参数或辅助训练目标的工作。
🎯
关键要点
- 通过最大化同一文本最小扰动嵌入之间的对齐,提出了基于对比学习的方法来学习文本表示。
- 新方法最大化文本与其短语成分之间的对齐,考虑了多种实现方式及其对表示的影响。
- 在语义文本相似性任务上,实验结果显示出与最先进的方法相当的基线改进。
- 该工作是第一个不需要额外网络参数或辅助训练目标的方法。
➡️