在构造 DPO 偏好数据时，人工标注成本大概是多少？请结合你的经验估量成本构成。

Question

Accepted Answer

考察点：考察对人工标注成本模型与优化策略的理解。回答思路：识别成本构成（提示、回答数、标注时长等） 给出量级估计并说明假设 提出降低成本的可行手段

考察说明