从世界到代码：通过自我指导的组合式标题生成和过滤实现多模态数据生成

BriefGPT - AI 论文速递 · 2024-09-30T00:00:00Z

本文介绍了一种名为JADE的新方法，利用多模态模型生成和过滤视觉问答及密集字幕数据集。应用于CC3M数据集，生成了CC3M-QA-DC数据集。通过多任务预训练，CC3M-QA-DC在下游任务中提升了多种网络的性能，并在相同计算条件下与使用更多数据的模型相比取得了竞争力的结果。