教育/培训行业面试题更新 2026-08-05

如果目标是通过工具使用成功率优化模型,你会选择 DPO 还是 GRPO?请说明理由和可能存在的问题。

网易有道人工智能教育/培训风险判断系统设计技术选型

考察说明

考察针对具体任务的后训练算法选型与权衡能力和风险认知

回答思路

  1. 明确选择并给出理由(如 GRPO 更利于探索和奖励区分)
  2. 能分析工具使用场景下奖励信号的特点(是否正确使用工具、结果成败等)
  3. 讨论可能存在的问题,如不确定性奖励、长轨迹稀疏信号
  4. 提出缓解措施或备选方案