高德地图面试题更新 2026-08-05
Transformer中LayerNorm通常放在Attention之前还是之后?请说明各自实现。
高德地图人工智能技术原理Transformer
考察说明
考察对Pre-LN和Post-LN结构差异的基本认知
回答思路
- 能说清Pre-LN与Post-LN的顺序区别
- 能指出原始Transformer使用Post-LN,GPT等常用Pre-LN
- 能结合实现细节说明归一化位置
本题附完整参考答案与评分标准
登录后可查看结构化答题指导;也可以直接开一场模拟面试,AI 面试官用本题实时追问并给出评分。