基于大型语言模型的上下文感知聚类

BriefGPT - AI 论文速递 · 2024-05-02T00:00:00Z

该研究使用大型语言模型（LLMs）的文本嵌入和聚类算法，评估了文本聚类方法对数据集的影响。结果显示，LLMs嵌入在捕捉结构化语言的细微差别方面表现出色，BERT在性能方面领先于其他轻量级选择。增加嵌入维度和使用摘要技术并不能统一提高聚类效率。该研究扩展了传统文本聚类框架，为改进方法学和文本分析开辟了新的研究方向。