本研究针对传统蒙特卡罗树搜索在高不确定性和噪声数据环境中的决策不足问题，提出了一种新颖的奖励中心ReST-MCTS框架，通过引入中间奖励塑造来增强搜索效率。实验结果表明，该方法在机器人操作任务中相比传统方法提高了2-4%的决策准确性，且在不同不确定性水平下表现出良好的稳健性。

本研究解决了现有基于大型语言模型（LLM）的自主机器学习代理在代码生成时存在的低多样性和次优质量问题。我们提出了一种新的自省蒙特卡洛树搜索方法（I-MCTS），通过分析父节点和兄弟节点的解决方案来不断优化搜索树中的节点，从而提高决策过程的整体质量。实验证明，该方法在各种机器学习任务中相较于其他开源AutoML代理表现出6%的绝对性能提升。

本研究提出了HiAR-ICL范式，克服了传统上下文学习在复杂数学推理中的局限性，通过抽象思维和推理动作实现了79.6%的准确率，超越了现有模型。

蒙特卡罗树搜索（MCTS）算法在复杂环境中优化决策，广泛应用于工业领域，如制造优化、供应链管理和机器人自动化。通过选择、扩展、模拟和回溯四个阶段，MCTS有效平衡探索与利用，尽管面临计算能力和数据质量挑战，仍展现巨大潜力。

文章介绍了OpenAI o1模型在物理、化学、生物学等领域的强大能力。通过大规模强化学习和“思维链”策略，o1提升了推理能力，能识别和纠正错误，并将复杂问题分解为简单步骤。文章还提到结果监督和过程监督的奖励模型，强调过程监督在解决复杂问题中的优势。复旦大学的R3方法通过逆向推理学习，增强了大型语言模型的推理能力。

本文介绍了一种基于AlphaZero的MCTS包装器，结合时间差异学习智能体，在多个复杂游戏中取得显著优势。研究探讨了AlphaZero和MuZero的局限性，提出了新的测试方法，并展示了在Atari游戏中使用transformer模型的最佳性能。此外，介绍了LuckyMera AI框架和MiniZero零知识学习框架，强调了渐进式模拟在棋盘游戏中的优越表现，为未来研究提供了基准。

本文介绍了一种基于蒙特卡洛树搜索（MCTS）的去中心化合作规划方法，应用于自动驾驶车辆的协调与建模。研究提出了多种改进算法，包括基于约束的MCTS、辅助模型加速的MCTS，以及结合启发式和学习方法的综合框架，旨在提高规划效率并满足代价约束。实验结果表明，这些方法在电网恢复和路径规划等实际应用中表现优异。

本文探讨了蒙特卡洛树搜索（MCTS）的多种改进和应用，包括MCTSnet、CMCGS和AmEx-MCTS等新方法。这些方法通过结合神经网络、连续状态空间和优化策略，显著提升了搜索效率和规划性能，尤其在路径规划和多智能体问题中表现优异。

本文探讨了蒙特卡罗树搜索（MCTS）在游戏及其他领域的应用，提出结合深度学习和优化算法的新方法，显著提升搜索效果和游戏表现。研究表明，MCTS在高维问题和复杂游戏中表现优越，验证了专家知识与策略原则的有效性。

基于强化学习的 ReST-MCTS* 方法结合过程奖励模型与树搜索 MCTS*，获取高质量的推理轨迹用于训练策略和奖励模型，在 LLM 自我训练中取得了更高的准确性和性能。

该文综述神经组合优化在多目标组合优化中的进展，涵盖神经组合优化学习、EMNH元启发式、MOPN指针网络、元学习训练及多样性增强等方法，可直接生成逼近帕累托前沿的解，提升泛化性与解质量；同时涉及不可满足性算法、MCTS启发式与课程学习，实验表明其性能与效率优于传统方法。

综述探讨大语言模型在硬件设计代码生成中的应用：RTLLM基准与self-planning提示提升GPT-3.5生成RTL性能；LLM4PLC利用用户反馈改善代码可验证性；PG-TD以规划算法引导生成更优程序；LLM生成RISC代码错误较多，需人工介入；L2MAC突破上下文窗口限制生成长代码；QLLM实现低精度量化；鉴别器引导MCTS控制长文本生成；7B模型优化LLVM汇编，指令计数减少3.0%。

本文综述混合专家（MoE）架构的多项进展：提出类注意力门控网络与数据驱动正则化以提升任务分解和专家专业化；结合三维混合并行优化训练效率；探索单门MoE异步训练与聚类初始化；理论证明路由器可学习聚类中心，将复杂问题分解为线性子问题；提出MEO降低计算成本、专家集群模型缓解过拟合，并应用于多语言生成。

该论文研究了约束优化问题的深度优先搜索算法，提出了一种基于MCTS的启发式神经网络算法。实验结果显示该方法能够快速找到与最优解间隔小于17.63%的解，并在约束满足问题中搜索节点数减少不到5%。

该文介绍了一种名为KCTS的知识约束解码方法，通过知识分类器分数和MCTS，在每个解码步骤上引导模型生成与参考知识一致的文本，以减少大型语言模型产生误信息的潜力。同时，作者还提出了一种新的标记级幻觉检测方法RIPA。实证结果表明，KCTS作为一种即插即用、模型不可知的解码方法，能有效减少自然语言生成中的幻觉。

该研究结合MCTS和PPO生成自然语言文本，相较于仅使用PPO策略，PPO-MCTS提高了生成文本的优越性，证明了搜索算法在语言模型上的潜力和价值网络的未充分探索的好处。

本文介绍了一种基于模型的强化学习技术，将Monte-Carlo树搜索应用于无限期Marov决策过程的有限期版本，并使用值函数和策略函数的组合来规定有限期问题的终端条件或决策树的叶节点评估器。作者还提供了第一个基于树搜索的强化学习算法的样本复杂度边界，并证明由深度神经网络实现的技术能够创建一种竞争性人工智能代理。