当前主流的稀疏注意力实现可分为三类：全到达（full reach）、滑动窗口（sliding windows）以及学习型选择器（learned selectors）。