该研究探讨了softmax策略梯度方法在无限时间马尔可夫决策过程中的全局收敛性，提出了动态策略梯度和熵正则化策略的有效性，证明了其收敛速度的优势，并分析了不同策略梯度方法的性能。