因果型赌博机:适应性的帕累托最优前沿,相对于线性赌博机的简化以及对未知边际分布的限制

💡 原文中文,约400字,阅读约需1分钟。
📝

内容提要

本研究通过优化问题将上下文马尔可夫决策过程中的迁移学习问题转化为因果效应识别问题,并通过线性规划获得因果模型和因果边界。实验证明了因果增强算法的优越性和快速收敛速度。

🎯

关键要点

  • 研究了部分可观察环境下的上下文马尔可夫决策过程中的迁移学习问题。
  • 将迁移学习问题转化为识别动作和奖励之间因果效应的问题。
  • 通过线性规划的顺序求解获得相容的因果模型和因果边界。
  • 采样算法提供适宜的采样分布的收敛结果。
  • 因果边界应用于改进传统的贝叶斯增强算法。
  • 分析了动作集大小和函数空间的影响。
  • 方法在函数逼近任务中处理一般的上下文分布,改善了对函数空间大小的依赖性。
  • 正式证明因果增强算法优于传统的贝叶斯增强算法,收敛速度更快。
  • 模拟实验证明策略相对于当前最先进的方法的高效性。
  • 在数据稀缺且成本高昂的实际应用中提高上下文马尔可夫决策过程的性能。
➡️

继续阅读