SelEx:细粒度广义类别发现中的自我专业化

💡 原文中文,约1600字,阅读约需4分钟。
📝

内容提要

本研究提出了一种基于粗糙标注的细粒度类别发现方法,结合自对比学习和有监督学习,以降低标记成本并提高聚类准确性。通过动态概念对比学习和自平衡协助对比框架,增强了细粒度类别的发现能力。此外,研究还提出了主动广义类别发现和正则化参数InfoMax方法,显著提升了未知类别的识别性能。实验结果验证了这些方法的有效性。

🎯

关键要点

  • 本研究提出了一种基于粗糙标注的细粒度类别发现方法,旨在通过粗糙标记数据发现细粒度类别,降低标记成本。
  • 动态概念对比学习(DCCL)框架通过交替估计视觉概念和学习概念表示,提高了聚类准确性,尤其在细粒度识别上表现优异。
  • 自平衡协助对比框架(BaCon)通过对比学习和伪标签分支协同工作,解决了广义类别发现任务中的分布不可知问题。
  • Denoised Neighborhood Aggregation (DNA)框架能够将数据的语义结构编码到嵌入空间中,学习紧凑的聚类表示,捕捉数据之间的语义相似性。
  • 转移和对齐网络(TAN)通过知识转移和特征对齐机制,改善了新颖类别的识别性能。
  • 主动广义类别发现(AGCD)通过主动选择样本进行标注,提升了广义类别发现的性能。
  • 正则化参数InfoMax(RPIM)方法通过伪标签监督未标记样本,显著提高了未知类的识别性能,超过现有技术的3.5%。
  • 使用粗粒度监督进行细粒度类别发现的方法在准确度和聚类指标上超越了现有最先进方法。
  • HiLo网络通过提取高层语义和低层域特征,确保语义聚类与域信息聚类独立,显著优于现有模型。

延伸问答

什么是基于粗糙标注的细粒度类别发现?

基于粗糙标注的细粒度类别发现是一种通过使用粗糙标记数据来发现细粒度类别的方法,旨在降低标记成本并适应不同粒度的类别。

动态概念对比学习(DCCL)框架的作用是什么?

DCCL框架通过交替估计视觉概念和学习概念表示,有效提高了聚类准确性,尤其在细粒度识别上表现优异。

自平衡协助对比框架(BaCon)如何解决广义类别发现中的问题?

BaCon框架通过对比学习和伪标签分支协同工作,提供交互式监督,解决了广义类别发现任务中的分布不可知问题。

主动广义类别发现(AGCD)有什么特点?

AGCD通过主动选择有限数量的有价值样本进行标注,旨在改善广义类别发现的性能。

正则化参数InfoMax(RPIM)方法的优势是什么?

RPIM通过伪标签监督未标记样本,显著提高了未知类的识别性能,超过现有技术的3.5%。

HiLo网络在类别发现中有什么创新之处?

HiLo网络通过提取高层语义和低层域特征,确保语义聚类与域信息聚类独立,显著优于现有模型。

➡️

继续阅读