上海得物信息集团有限公司面试题更新 2026-08-05
position embedding 和 input 是怎么融合的?
上海得物信息集团有限公司高德地图人工智能互联网/IT技术原理技术选型BERTTransformer
考察说明
考察对 Transformer 中位置编码与输入表征融合方式的理解
回答思路
- 明确说明位置编码与词向量通过加法进行融合
- 解释加法融合的内在合理性及与传统拼接的区别
- 能结合具体模型(如 BERT、Transformer)说明实现细节
- 能指出不同位置编码方式(绝对、相对、可学习)的融合特点
本题附完整参考答案与评分标准
登录后可查看结构化答题指导;也可以直接开一场模拟面试,AI 面试官用本题实时追问并给出评分。