BriefGPT - AI 论文速递 · 2024-11-12T00:00:00Z

Are Cognition and Perception Consistent? Evaluating and Mitigating Multimodal Knowledge Conflicts in Document Understanding

📝

内容提要

本研究提出了一种多模态知识一致性微调方法，解决了多模态大型语言模型在文档理解中感知与认知的冲突问题，显著提升了一致性。

🏷️

标签

多模态 大型语言模型 微调 文档理解 知识一致性