Dual-Stage Cross-Modal Network with Dynamic Feature Fusion for Emotional Mimicry Intensity Estimation

💡 原文英文,约100词,阅读约需1分钟。
📝

内容提要

本研究提出了一种双阶段跨模态对齐框架,用于情感模仿强度(EMI)估计。通过改进的CLIP架构和时间感知动态融合模块,显著提高了特征对齐精度和抗噪声能力,实验结果表明该方法在情感维度上优于最佳基线40%。

🎯

关键要点

  • 本研究提出了一种双阶段跨模态对齐框架,用于情感模仿强度(EMI)估计。

  • 该框架通过改进的CLIP架构构建视觉-文本和音频-文本对比学习网络。

  • 采用时间感知动态融合模块,显著提高了特征对齐的精细度和抗噪声能力。

  • 实验结果表明,该方法在情感维度上优于最佳基线40%。

➡️

继续阅读