阿里云面试题 · 方案权衡 · Transformer
阿里云相关面试题，按最终去重题目聚合。
共 2357 道真题 · 当前筛选命中 6 道 · 更新 2026-08-05
筛选题目已选：方案权衡 · Transformer
考察点
技术栈
第 1 题除了标准多头注意力（MHA）之外，你还了解哪些注意力机制（如 GQA、MQA、MLA）？请讲解其原理。 考察对高效注意力变体的原理理解，包括参数共享、KV缓存和推理效率第 2 题旋转位置编码相比于传统正余弦位置编码的主要区别是什么？ 考察对两类位置编码机制差异的理解第 3 题请谈谈你对行人重识别算法的技术选型考虑，包括是否需要训练模型以及如何进行创新？ 考察对行人重识别技术方案的理解、模型训练必要性与创新路径第 4 题为什么大模型会选择使用旋转位置编码？ 考察对旋转位置编码设计动机和实际优势的综合理解第 5 题为什么Transformer中前馈网络FFN的隐藏维度通常是输入维度的4倍（d到4d）？ 考察对Transformer架构设计动机和参数权衡的理解第 6 题Transformer的FFN层能不能去掉，为什么？ 考察对Transformer架构中FFN层作用及必要性的深入理解