请介绍ChatGLM模型的整体架构及其关键设计特点。

Question

Accepted Answer

考察点：考察对大语言模型架构原理的理解与表达能力。回答思路：能清晰描述ChatGLM的Transformer基础架构 能说明其独特的GLU、旋转位置编码等设计 能解释其自回归生成与注意力机制的特点 能结合预训练与微调流程说明整体工作方式

考察说明