关于 UCT、AlphaGo 及其变种的超指数遗憾
💡
原文中文,约300字,阅读约需1分钟。
📝
内容提要
本文改进了Coquelin和Munos(2007)的证明,证明了在D链环境上,UCT算法可能导致指数级的遗憾。同时使用证明方法对AlphaGo的MCTS及其后继算法演示了相同的遗憾程度。
🎯
关键要点
- 改进了Coquelin和Munos(2007)的证明。
- 在D链环境上,UCT算法可能导致指数级的遗憾。
- 具有与指数2的指数2减去O(log D)成正比的多项式UCT变体也可能导致相同的遗憾。
- 对AlphaGo的MCTS及其后继算法(如AlphaZero,Leela Zero)演示了相同的遗憾程度。
➡️