状态空间覆盖度

状态空间覆盖度是衡量智能体在训练或运行过程中访问过的不同环境状态占全部可达状态比例的一个概念性指标。

实际使用中，可以用状态哈希、观测嵌入聚类或去重计数等方式近似估计状态空间覆盖度。

若状态空间覆盖度长期停滞而任务成功率不升，往往意味着智能体陷入了重复循环，需要调整探索奖励的权重或记忆机制的粒度。