检索增强的食谱生成

💡 原文英文,约100词,阅读约需1分钟。
📝

内容提要

本研究提出了一种检索增强的大型多模态模型,旨在解决食谱生成中的“幻觉”问题。通过随机多样化检索增强技术和自一致性集成投票机制,提升了Recipe1M数据集的生成性能。

🎯

关键要点

  • 本研究提出了一种检索增强的大型多模态模型。
  • 该模型旨在解决食谱生成中的“幻觉”问题。
  • 引入随机多样化检索增强(SDRA)技术,补充与图像语义相关的食谱。
  • 结合自一致性集成投票机制,提升生成性能。
  • 在Recipe1M数据集上实现了食谱生成任务的最新性能。
➡️

继续阅读