请介绍Transformer Decoder中的cross-attention机制,包括它的作用、计算流程以及与self-attention的区别。
考察说明
考察对Transformer架构中cross-attention机制的理解与表达能力
回答思路
- 清晰说明cross-attention在Decoder中的位置和作用
- 准确描述Q、K、V的来源及其与Encoder输出的关系
- 能对比cross-attention与self-attention的差异
- 能解释cross-attention对序列到序列任务的意义
本题已收录答题指导
本题附完整参考答案与评分标准
登录后可查看结构化答题指导;也可以直接开一场模拟面试,AI 面试官用本题实时追问并给出评分。