Login
From:
spaces.ac.cn
(Uncensored)
subscribe
Transformer升级之路：6、旋转位置编码的完备性分析 - 科学空间|Scientific Spaces
https://spaces.ac.cn/archives/9403
links
backlinks
Roast topics
Find topics
Find it!
在去年的文章《Transformer升级之路：2、博采众长的旋转式位置编码》中，笔者提出了旋转位置编码（RoPE），当时的出发点只是觉得用绝对位置来实现相对位置是一件“很好玩的事情”，并没料到其...
