离线强化学习指仅从固定数据集学习策略、不与环境交互，常需处理分布偏移问题。