寒武纪面试题 · 技术原理 · Transformer
寒武纪相关面试题,按最终去重题目聚合。
共 179 道真题 · 当前筛选命中 6 道 · 更新 2026-08-05
筛选题目已选:技术原理 · Transformer
考察点
技术栈
第 1 题写出Transformer的attention公式 考察Transformer自注意力机制的数学表述与核心组件理解第 2 题请解释注意力机制的核心思想及常见实现方式。 考察对序列建模中依赖捕获与加权融合的理解第 3 题Transformer和CNN的区别和用法是什么? 考察对两类主流神经网络架构的原理差异、适用场景和各自优缺点的理解第 4 题介绍Transformer多头注意力机制,并重点说明计算过程。 考察对多头注意力机制原理与计算流程的掌握第 5 题请介绍Transformer中的Block(编码器块)结构,并说明各组成部分的作用。 考察对Transformer核心组件及其设计意图的理解第 6 题为什么 Self-Attention 中要对点积结果除以 sqrt(d_k) 做缩放?请解释其数学原理和实际作用。 考察对 Transformer 中注意力缩放机制原理的理解