当关键决策与回报之间相隔数百步时，TD信号会因多步累积的方差和折扣因子而衰减，导致获取动作的价值被严重低估。