在线情景式表格MDP中，损失函数是对抗性的，环境可以在每轮选择任意损失，且反馈是bandit式的，即只能观测到所选动作的损失。