MindSearch是中科大与上海人工智能实验室联合开发的开源AI搜索引擎框架,性能与Perplexity.ai Pro相当。该框架由WebPlanner和WebSearcher两部分组成,前者负责问题推理,后者进行信息搜索,通过拆分问题构建搜索图,提供准确回答。
本文研究了音视频问答(AVQA)任务,提出了MUSIC-AVQA数据集及多种模型优化策略,提升了多模态关系探索和问题推理能力。实验结果表明,所提方法在多个数据集上优于现有技术,有效应对缺失模态信息和冷启动问题。
完成下面两步后,将自动完成登录并继续当前操作。