[控场AI]
概念Model-Based Risk-Sensitive Q-Value Iteration / 基于模型的风险敏感Q值迭代

MB-RS-QVI

一种基于模型的风险敏感强化学习算法,先用样本估计MDP转移模型,再在估计模型上执行风险敏感Q值迭代,属于plug-in方法,用于递归熵风险偏好下的策略学习

时间轴 (近 90 天)

10月7日

论文没有提出全新算法,而是对已有的基于模型的风险敏感Q值迭代方法MB-RS-QVI进行了更精细的理论分析

待验证50%
10月7日

MB-RS-QVI是一种plug-in方法,先用采集的样本估计出MDP转移模型,再在估计模型上做风险敏感Q值迭代

待验证50%
10月7日

新的样本复杂度界在对|β|/(1-γ)的指数依赖上匹配了已知下界

待验证50%
10月7日

新界在状态数S、动作数A、精度ε及风险参数|β|上的依赖在对数因子范围内与下界吻合

待验证50%
10月7日

本文精细化分析证明MB-RS-QVI的实际指数依赖形式为e^(O(|β|/(1-γ))),与信息论下界匹配

待验证50%

全部知识事实 (5)

来源文章