生成式推荐（GRs）在过去一年取得显著进展，依托大型语言模型（LLM）提升推荐性能，形成新范式。传统推荐面临特征工程和模型复杂度的瓶颈，而LLM通过长序列建模和知识注入有效解决冷启动问题。未来，GRs将重点关注深度推理、多模态对齐和并行生成优化，重构推荐系统的价值链。

本研究提出了一种通过逆问题实现完美多模态对齐的方法，验证了在假设语义类别以高斯混合形式表示的条件下，无监督跨模态迁移的有效性，展示了其应用潜力。

《2024中国开源开发者报告》聚焦AI大模型，指出“算力墙”导致模型效果递减，智能体将成为最佳AI产品。傅聪预测2025年为智能体元年，未来发展需依赖领域模型小型化、合成数据和多模态对齐等趋势。

本研究提出了统一注意力校准（UAC）和动态注意力校准（DAC）方法，以减缓大型视觉-语言模型中的对象幻觉现象。这些方法有效提高了多模态对齐的准确性，推动了不同LVLM架构的性能达到最先进水平。

本文探讨了视觉与语言导航（VLN）任务中的多模态对齐技术，提出了基于全注意力机制的架构、预训练模型和新训练范式LEO等多种方法，以提升导航性能。研究表明，这些方法在不同数据集上显著提高了成功率，推动了VLN技术的发展。

本文探讨了视觉语言模型（VLMs）的多模态对齐与偏好提取，提出了基于人类反馈的算法，显著提升了模型在复杂任务中的表现。研究通过构建视觉语言反馈数据集和直接偏好优化方法，改善了模型的感知与认知能力，并解决了幻觉问题。此外，推出了WildVision-Arena平台，以收集人类偏好评估VLMs，推动了该领域的研究进展。

本文研究音视频问答（AVQA）任务，提出了MUSIC-AVQA数据集及多种新方法，如渐进式时空感知网络和上下文多模态对齐网络，显著提升了问答性能。同时，研究探讨了多语言环境下的AVQA，提出新的数据集和框架，以提高鲁棒性和准确性。

本文研究了大型语言模型（LLM）的对齐方法，分析了对齐数据集和技术对模型性能的影响。研究表明，较小训练数据子集中的对齐方法在数学问题解决中效果最佳。提出了一种基于蒸馏的多模态对齐模型，增强了语言能力，并通过细粒度监督提升了模型性能。此外，提出了一种参数高效的对齐方法（MEET），显著提高了可控生成质量，强调了对人类偏好的对齐对模型安全性的重要性。

本文介绍了多种视频时刻检索方法的进展，包括多粒度感知网络（MGPN）、HAMMER模型和背景感知时刻检测变压器（BM-DETR）。这些方法通过优化算法和多模态对齐机制，提高了视频检索的准确性和效率，超越了传统基线，展示了最新性能。

本文介绍了多种基于视觉-语言模型的3D场景理解方法，包括无标签数据的伪监督训练、视觉-LiDAR融合和新颖的3D预训练方法。这些技术在3D语义分割、物体检测和姿态估计等任务中显著提升了性能，展示了跨模态知识交流和多模态对齐能力。

本文探讨了视觉与语言导航任务中的多模态对齐技术，提出了跨模态匹配、对比学习和因果学习框架等方法，以提升导航智能体的性能。研究表明，Transformer模型在跨模态理解上表现优越，并通过实验证明了新方法在不同环境中的有效性和泛化能力。

本文提出了一种基于蒸馏的多模态对齐模型，通过偏好调优和自动生成数据的方法解决视觉大语言模型中的幻觉问题。研究探讨了大型语言模型的偏差，提出了OPEN框架以优化用户偏好获取，并介绍了因果偏好优化（CPO）和相对偏好优化（RPO）等新方法，显著提升了模型性能和适应性。

本文综述大语言模型在化学与生物分子领域的应用进展，涵盖ChemLLM、InstructChem、ChemBERTa-2、Mol-Instructions、MolReGPT、InstructMol、BioInstruct等模型与数据集，涉及分子表示、反应预测、指令微调及多模态对齐，并探讨知识整合与可解释性等未来方向。

该文汇总了多项视频问答与不确定性建模研究：提出神经不确定性量化器的层次变分框架以预测视频帧；利用自动生成问答对与自适应学习提升视频问答；采用自监督预训练、对比学习和局部对齐注意力；用梯度估计改进视觉问答的确定性与注意力解释；将大语言模型转为可估计不确定性的模型；设计端到端VideoQA框架与异构内存；提出课程强化学习目标生成；结合多模态对齐与层次框架；并通过多任务学习提供额外监督。