通信/运营商行业面试题 · tech:transformer
通信/运营商行业相关面试题，按题目行业基础数据聚合。
共 5120 道真题 · 当前筛选命中 12 道 · 更新 2026-08-05
筛选题目已选：tech:transformer
考察点
技术栈
第 1 题Transformer的encoder和decoder有什么不同？请从结构和任务两个层面说明。 考察对Transformer模型结构差异和任务定位的理解第 2 题Transformer 为什么在大批量数据上表现更好？ 考察对 Transformer 模型结构、训练动态与数据规模关系的理解第 3 题Transformer中为什么缩放因子要除以根号dk？ 考察对注意力机制数值稳定性和原理的理解第 4 题Transformer和CNN有什么不同？ 考察对两种主流网络架构的机制理解与适用场景辨析第 5 题请介绍Transformer模型的主要结构和工作原理。 考察对Transformer核心组件、自注意力机制及整体工作原理的理解第 6 题请解释Transformer架构，并说明为什么注意力机制能够有效工作。 考察对Transformer核心机制及注意力有效性原理的理解第 7 题在 Masked Multi-Head Attention 中，mask 掩码值为什么通常取-1（或一个较大的负数）？ 考察对注意力机制中 softmax 数值处理和掩码原理的理解第 8 题Transformer的Decoder为什么要用掩码？ 考察对自回归解码与因果掩码原理的理解第 9 题Transformer的Attention计算为什么要除以根号d 考察对注意力机制缩放因子的理解及数值稳定性第 10 题请解释什么是KV Cache，以及为什么一般只缓存Key和Value矩阵，而不对Query和Key的乘积做缓存？ 考察对Transformer推理优化中KV Cache原理及缓存粒度的理解第 11 题Masked Multi-Head Attention的mask怎么做的 考察对Masked Multi-Head Attention中mask机制的理解和实现细节第 12 题请写出Transformer核心计算公式，并说明各组件的作用。 考察对Transformer核心计算机制的掌握程度