所有策略同时在更新时，联合策略分布随时间漂移，智能体i实际面对的等效转移也随之改变。