论文：线性时间序列建模
talkingdev • 2023-12-06
1191768 views
该论文借鉴了LSTM的思想，并训练了一个拥有3B参数的模型，其性能优于更大的7B参数Transformer模型。这项工作有望在序列建模领域取得新的进展，尤其是在性能和可伸缩性方面。
核心要点
- 该论文提出了一种新的序列建模方法，其性能优于更大的7B参数Transformer模型
- 该方法借鉴了LSTM的思想，利用线性时间算法实现了可扩展性
- 这项工作有望为序列建模领域带来新的进展