MiniMax面试题更新 2026-08-05

请说明一个典型大语言模型中各主要模块的参数占比情况,例如嵌入层、注意力层和前馈网络层。

MiniMax人工智能问题拆解技术原理

考察说明

考察对Transformer模型结构及参数分布的理解

回答思路

  1. 能清晰区分嵌入层、注意力层、前馈网络等模块
  2. 能解释各模块参数量的影响因素(如隐藏维度、层数)
  3. 能给出定量估计或比例分析
  4. 能结合实际模型(如GPT或BERT)举例