美团面试题更新 2026-08-05

RMSNorm和LayerNorm主要区别在哪里?现在大模型更偏好哪一种,为什么这样设计?

美团人工智能互联网/IT技术原理方案权衡

考察说明

考察对归一化原理的理解及大模型架构选型的能力

回答思路

  1. 准确说明RMSNorm省略了均值中心化,仅做缩放
  2. 解释RMSNorm的计算方式与LayerNorm的差异
  3. 指出大模型更常用RMSNorm并解释训练稳定性和计算效率原因
  4. 能结合实际说明RMSNorm在Transformer中的位置和影响
本题已收录答题指导

本题附完整参考答案与评分标准

登录后可查看结构化答题指导;也可以直接开一场模拟面试,AI 面试官用本题实时追问并给出评分。