上下文苹果品尝问题源自在线学习中的苹果品尝框架：决策者每轮在“接受”或“拒绝”物品之间选择，只有选择“接受”时才能观察到真实标签，拒绝时无法获得反馈。