请说明大模型后训练阶段的数据规模，以及训练数据集是如何构建的？

Question

Accepted Answer

考察点：考察对后训练数据规模与构建方法的理解，以及实操经验。回答思路：说明后训练数据规模量级及与预训练数据的区别 解释数据集的来源、清洗与混合策略 结合具体任务（如SFT、RLHF）说明构建流程

考察说明