Attention Is Not What You Need

summary_zh: 研究者提出一種完全不使用注意力機制的序列模型——Causal Grassmann layer，並在 Wikitext‑2 與 SNLI 任務中達到與 Transformer 相近的表現。