[控场AI]
概念Actor-Critic强化学习框架

Actor-Critic

Actor-Critic是强化学习中的一类算法框架,结合了基于策略(Policy-based)和基于价值(Value-based)两种方法的优点。其中Actor负责根据当前策略选择动作,Critic负责评估该动作的价值并生成误差信号以指导Actor更新策略。该框架有效降低了策略梯度方法的方差,提升了训练稳定性,广泛应用于机器人控制、游戏智能及自然语言处理等领域。

时间轴 (近 90 天)

10月12日

Dreamer的策略学习采用Actor-Critic框架:Actor根据想象出的潜在状态s_t输出动作分布,Critic估计该状态的价值;梯度通过世界模型的潜在轨迹回传,但世界模型参数通常被冻结以避免策略优化信号污染世界模型的学习目标,从而保持训练稳定。

待验证50%

全部知识事实 (1)

来源文章