基于监督引导的零样本学习:一种无实际数据曝露的协同范式
内容提要
本文探讨了零样本学习(ZSL)和广义零样本学习(GZSL)的最新研究进展,提出了多种模型和方法,如生成对抗网络、流形嵌入和概率生成建模,以解决已知类与未知类之间的数据不平衡问题。这些方法在多个视觉识别基准数据集上表现优越,推动了对抗鲁棒性和语义嵌入的理解。
关键要点
-
通过本体论知识表示和语义嵌入,建模 ZSL 的类间关系,使用生成对抗网络开发生成 ZSL 框架,解决已知类与未知类之间的数据不平衡问题。
-
提出两个使用流形嵌入和自动生成视觉分类器的 ZSL 系统,在五个视觉识别基准数据集上表现优越。
-
综述广义零样本学习(GZSL)的问题及挑战,展示分层分类方法,探讨 GZSL 的基准数据集和未来研究方向。
-
介绍基于 Episode 的训练框架,通过逐步积累经验预测看不见的类,提出新的生成模型,确保视觉语义交互匹配,实验结果优于现有方法。
-
利用标签嵌入模型评估零样本学习和广义零样本学习模型的对抗鲁棒性,创造首个基准测试,帮助理解模型面临的挑战。
-
提出基于概率的方法,将分类器分为三个组件,解决未知类别的门控概率估计问题,COSMO 方法在 GZSL 基准数据集上表现良好。
-
基于数据合成和竞争双向投影学习的模型,在语义空间和特征空间之间学习鲁棒的投影函数,取得最先进的结果。
-
提出校准方法解决已知类别与未知类别图像识别的冲突,强调改进类别语义嵌入对 GZSL 的重要性。
-
提出新颖的语义分离框架,使用条件 VAE 分解未见类别的视觉特征,确保特征之间的独立性和语义一致性,实验结果显示其普适性。
延伸问答
什么是零样本学习(ZSL)?
零样本学习(ZSL)是一种机器学习方法,旨在通过已知类别的知识来识别未知类别的实例。
文章中提到的生成对抗网络在零样本学习中有什么作用?
生成对抗网络用于开发生成 ZSL 框架,以解决已知类与未知类之间的数据不平衡问题。
广义零样本学习(GZSL)面临哪些挑战?
广义零样本学习(GZSL)面临的问题包括类别间的代表性不足和对未知类别的准确识别。
如何评估零样本学习模型的对抗鲁棒性?
通过利用标签嵌入模型,评估模型在对抗攻击和防御下的表现,创造基准测试。
文章中提到的COSMO方法有什么特点?
COSMO方法将分类器分为三个组件,解决未知类别的门控概率估计问题,并在GZSL基准数据集上表现良好。
如何改进广义零样本学习的类别语义嵌入?
通过校准方法解决已知类别与未知类别图像识别的冲突,强调改进类别语义嵌入的重要性。