互联网/IT行业面试题更新 2026-08-05

在训练语言模型时,tool response 的 token 是否需要加入 loss 计算?请说明理由。

北京智谱华章科技人工智能互联网/IT技术原理方案权衡

考察说明

考察对语言模型训练损失函数设计与工具调用场景的理解

回答思路

  1. 说明 tool response 是模型生成的结果还是外部输入
  2. 讨论是否应让模型学习准确复述外部结果
  3. 对比常规答案 token 与工具输出的训练目标差异