本文介绍了多目标强化学习和逆强化学习的最新研究进展，包括基于广义Bellman方程的算法、双层优化框架和逆偏好学习（IPL）算法。这些方法在不同任务中表现优越，尤其在离线设置下，通过动态选择子目标和专家数据引导学习，提高了学习效率和策略表现。