阿里云面试题更新 2026-08-05
请解释自注意力机制的原理,并说明它与传统RNN在处理长序列时的区别。
阿里云运维/技术支持专业服务问题拆解技术原理
考察说明
考察对Transformer核心机制的理解及与传统序列模型的对比能力
回答思路
- 能解释自注意力通过Q、K、V计算注意力权重
- 能说明加权求和得到输出向量的过程
- 能对比自注意力与RNN在长距离依赖和并行计算上的优劣
- 能提及复杂度(O(n^2))与位置编码的必要性
本题附完整参考答案与评分标准
登录后可查看结构化答题指导;也可以直接开一场模拟面试,AI 面试官用本题实时追问并给出评分。