请说明批归一化（Batch Normalization）层在实际训练和应用中存在哪些缺点?

Question

Accepted Answer

考察点：考察对批归一化机制的深入理解及其在训练、推理和不同任务中的局限性。回答思路：指出依赖 mini-batch 统计导致的小 batch 不稳定问题 说明训练与推理阶段统计量不一致的影响 涉及序列长度动态变化或任务对 batch 依赖敏感的场景 能提出相关改进或替代方案

考察说明