我要招人

腾讯面试题更新 2026-08-05

Transformer 的位置编码是怎么做的？为什么需要它？

腾讯人工智能互联网/IT技术原理方案权衡Transformer

考察说明

考察对位置信息建模原理及常见实现的理解

回答思路

  1. 说明 Transformer 无内建顺序概念
  2. 描述正弦余弦绝对位置编码公式
  3. 可对比可学习位置编码与相对位置编码
  4. 解释旋转位置编码等改进思路
本题已收录答题指导

本题附完整参考答案与评分标准

登录后可查看结构化答题指导；也可以直接开一场模拟面试，AI 面试官用本题实时追问并给出评分。

开始模拟面试登录查看答题指导