淘天集团面试题更新 2026-08-05
用BERT做分类时，softmax应该添加在哪个层级，维度如何选择？
淘天集团人工智能互联网/IT编码实现技术原理BERTTransformer
考察说明
考察BERT分类头的实现细节与输出维度设计
回答思路
- 指出softmax应加在分类头（全连接层）之后
- 说明分类头输入是BERT输出的向量（常为[CLS]向量）
- 说明softmax维度是最后一维，长度为类别数
- 能说明常用做法是线性层输出logits后再接softmax得到概率分布
本题附完整参考答案与评分标准
登录后可查看结构化答题指导；也可以直接开一场模拟面试，AI 面试官用本题实时追问并给出评分。
