互联网/IT行业面试题更新 2026-08-05

请解释一下GRPO(Group Relative Policy Optimization)的原理和它在强化学习中的作用。

字节跳动人工智能互联网/IT技术原理方案权衡

考察说明

考察对GRPO算法原理的理解及其与PPO等算法的关系

回答思路

  1. 明确指出GRPO是基于分组相对优势的策略优化方法
  2. 说明GRPO如何处理优势估计和基线
  3. 解释GRPO在训练(如大模型)中的典型应用场景