SATO: 稳定的文本到动作框架
💡
原文中文,约300字,阅读约需1分钟。
📝
内容提要
研究发现文本到动作模型的重要问题,并建立了稳定的文本到动作框架(SATO),验证结果表明SATO在同义词和轻微扰动的稳定性方面优于其他模型,同时保持高准确性。
🎯
关键要点
-
研究发现文本到动作模型的重要问题。
-
建立了不稳定的模型输出与文本编码模块的注意力模式之间的联系。
-
引入了稳定的文本到动作框架(SATO)。
-
SATO包括稳定的注意力、稳定的预测和平衡准确性与稳健性之间的模块。
-
引入了新的文本同义扰动数据集,基于HumanML3D和KIT-ML。
-
验证结果表明SATO在同义词和轻微扰动的稳定性方面优于其他模型。
-
SATO同时保持高准确性表现。
➡️