后端岗位面试题更新 2026-08-05

请写出 self-attention 的计算公式,并解释各部分的含义。

超参数科技后端开发人工智能技术原理Transformer

考察说明

考察对 Transformer 核心 self-attention 机制的数学表达与理解

回答思路

  1. 正确写出 Q、K、V 的计算表达式
  2. 写出注意力权重 softmax(QK^T/√d_k) 及缩放因子含义
  3. 写出输出为权重与 V 的加权和
  4. 能解释 Q、K、V 的来源和缩放因子的作用
本题已收录答题指导

本题附完整参考答案与评分标准

登录后可查看结构化答题指导;也可以直接开一场模拟面试,AI 面试官用本题实时追问并给出评分。