RoPE是怎么应用在超出长度限制的输入上的？BERT的位置编码可以用到超出长度限制的输入上吗？

回答思路

1. 解释RoPE的旋转位置编码原理及其不依赖可学习绝对位置的特性
2. 说明RoPE如何通过旋转矩阵实现相对位置信息，从而具备长度外推能力
3. 分析BERT的可学习绝对位置编码在超出训练长度时的局限性
4. 对比两者在长度外推上的差异及可能的扩展方法