外推误差是指在离线RL中，学习策略选择数据集中未出现或很少出现的动作时，后续状态进入未覆盖区域，导致价值函数估计产生严重误差且随轨迹推演累积。