xGen-MM (BLIP-3): 一种开放的大型多模态模型家族

本研究解决了大型多模态模型（LMMs）开发中数据集和训练方法不足的问题，并提出了一种新的框架xGen-MM（BLIP-3）。该框架通过严格评估和安全调优，展示了在多任务场景下的强大性能，并为未来研究提供了开放的资源和数据。