元学习引导的微表情识别
内容提要
本研究提出了一种新型微表情识别方法,结合深度学习和图分类网络,通过特征提取和对比学习实现高准确率。利用多模态算法和生成对抗网络,显著提升了微表情识别的效率和效果,超越了传统方法。
关键要点
-
本研究提出了一种新的端到端 AU 导向的图分类网络,使用深度学习技术和 GCN 层探测 AUs 之间的依赖关系,以识别微表情。
-
通过属性信息嵌入和跨模态对比学习,实现面部微表情识别,准确率分别为 77.82% 和 71.04%。
-
构建几何二流图网络、自学习机制和自适应动作单元损失函数,研究人脸标志物对微表情识别的贡献,具有更高的效率和更低的计算成本。
-
提出了一种基于 Transformer 网络的多模态多尺度算法,实现了不同尺度脸部局部区域特征的提取,准确度高达 78.73%。
-
利用特征差异对长视频中自发微表情进行识别,提出了自动微表情分析系统,超越了人类在微表情识别任务上的表现。
-
提出了基于特征表示学习的位移生成和 Transformer 融合的新框架,实现了对微表情特征提取和融合的有效学习。
-
提出了一种基于生成对抗网络的方法 ICE-GAN,加入微表情合成作为辅助任务,获得了比冠军高出 12.9% 的成绩。
-
提出的面部微表情识别方法 Micron-BERT,在大规模无标注数据集上实现了高精度,明显优于现有方法。
延伸问答
这项研究提出了什么新方法来识别微表情?
研究提出了一种新的端到端 AU 导向的图分类网络,结合深度学习和图分类技术来识别微表情。
该研究的微表情识别准确率是多少?
通过属性信息嵌入和跨模态对比学习,准确率分别为 77.82% 和 71.04%。
研究中使用了哪些技术来提升微表情识别的效率?
研究中使用了几何二流图网络、自学习机制和自适应动作单元损失函数来提升效率。
该研究如何处理长视频中的微表情识别?
研究利用特征差异对长视频中的自发微表情进行识别,并提出了自动微表情分析系统。
ICE-GAN方法在微表情识别中有什么优势?
ICE-GAN方法通过加入微表情合成作为辅助任务,获得了比冠军高出 12.9% 的成绩。
Micron-BERT方法在微表情识别中表现如何?
Micron-BERT在大规模无标注数据集上实现了高精度,明显优于现有方法。