离线RL只在预先收集好的固定数据集上训练策略，训练期间不再与环境交互，其核心优势是训练过程完全可复现、可审计。