RNN时代模型严格按从左到右顺序逐词阅读且不回头看，导致隐藏状态推进时上下文信息严重衰减，即长期依赖问题。