互联网/IT行业面试题更新 2026-08-05

Transformer 为什么使用 LayerNorm 而不是 BatchNorm?

美团高德地图人工智能互联网/IT技术原理方案权衡Transformer

考察说明

考察对归一化机制在序列建模中适用性的理解

回答思路

  1. 说明 BatchNorm 对 batch size 和序列长度的依赖
  2. 解释 LayerNorm 对每个样本独立归一化的特性
  3. 结合 Transformer 结构和训练稳定性分析
  4. 提及 LayerNorm 在推理时的便利性
本题已收录答题指导

本题附完整参考答案与评分标准

登录后可查看结构化答题指导;也可以直接开一场模拟面试,AI 面试官用本题实时追问并给出评分。