异步收集机制允许不同轨迹在不同时间推进，采样与训练并行进行，但代价是用于更新的数据可能来自旧策略，导致策略滞后。