类库 › recurrent-looped-tranformer
yifanzhang-pro

yifanzhang-pro/recurrent-looped-tranformer

该仓库是Recurrent Looped Transformer (RLT)的官方项目页,展示了一种新型Transformer架构。它通过在提示和响应token间传递解码器隐藏状态并结合滑动窗口注意力,实现高效的递归计算。主要用于学术研究,提供论文、代码及实验结果。

评论

trang chủ - Wiki
Copyright © 2011-2026 iteam. Current version is 2.155.2. UTC+08:00, 2026-09-24 16:51
浙ICP备14020137号-1