さようなら、ロータリーポジション埋め込み(RoPE)。RoPEは今後のLLMでは活用されなくなると予想されます。 何か重要なことがすでに明らかになっています。答えはこの画像の中にあります。乞うご期待!🚀