Informer: Beyond Efficient Transformer for Long Sequence Time-Series Forecasting

Informer: Beyond Efficient Transformer for Long Sequence Time-Series Forecasting とは、一様分布からの逸脱度が大きい行（＝重要な「注意」を含んでいる見込みが高い）だけを残し他の行は捨てる Transformer である。

https://arxiv.org/abs/2012.07436
https://cookie-box.hatenablog.com/entry/2021/02/11/195822