讲解Transformer的Decoder结构,包括它包含几层Attention,以及Cross Attention在其中的位置和作用。
考察说明
考察对Transformer Decoder内部结构、Attention层组成及跨注意力机制的理解
回答思路
- 准确说明Decoder中自注意力、交叉注意力和前馈网络层的堆叠结构
- 正确指出Cross Attention的位置(在自注意力之后、前馈网络之前)以及其查询向量来源
- 解释Decoder自注意力与编码器输出的交互方式
- 说明不同的Decoder设计(如输入嵌入、位置编码、掩码机制)对Attention层的影响
本题已收录答题指导
本题附完整参考答案与评分标准
登录后可查看结构化答题指导;也可以直接开一场模拟面试,AI 面试官用本题实时追问并给出评分。