该框架的关键设计是一种内在奖励：当智能体的新观测与先前状态记忆重复时，该奖励会施加惩罚。