CPT 训练时对机器配置（GPU、显存、内存等）有什么要求？如何估算？

Question

Accepted Answer

考察点：考察对大规模模型训练资源需求的理解和估算能力。回答思路：能说明显存、内存、GPU 数量的基本要求 能基于模型参数规模和数据量估算训练时间与算力 能提到混合精度、梯度检查点等省资源手段

考察说明