人工智能面试题更新 2026-08-05

请介绍强化学习(RL)中 PPO 和 GRPO 这两种算法的核心思想,并说明它们的主要区别。

百度人工智能专业服务技术原理方案权衡

考察说明

考察对现代强化学习算法的深入理解与对比能力

回答思路

  1. 准确阐述 PPO 的核心机制(如裁剪目标函数)
  2. 准确阐述 GRPO 的核心机制(如基于组的相对奖励)
  3. 能清晰对比 PPO 与 GRPO 在采样、奖励利用和复杂度上的差异
  4. 能结合具体场景说明各自适用性