概念Policy Optimization
策略优化
强化学习中直接优化策略的方法,通过在每个状态局部更新策略来改进性能,相比占用度量方法计算更简洁但遗憾界通常大H倍。
时间轴 (近 90 天)
10月12日
近期一篇理论研究通过正则化Q函数,在对抗性MDP下将策略优化的遗憾界提升了整整一个H因子,从而消除了Horizon差距。
待验证50%
强化学习中直接优化策略的方法,通过在每个状态局部更新策略来改进性能,相比占用度量方法计算更简洁但遗憾界通常大H倍。
近期一篇理论研究通过正则化Q函数,在对抗性MDP下将策略优化的遗憾界提升了整整一个H因子,从而消除了Horizon差距。