验证集里有 4.7% 的样本以另一种表述出现在训练集中。这篇写数据去重、评测污染的检测方法,以及为什么漂亮的指标往往是最危险的信号。
把 Linformer、Performer、Mamba、滑动窗口放在同一张坐标系里比较,看它们各自放弃了什么样的长程依赖能力。