阿里云面试题 · tech:deepspeed
阿里云相关面试题,按最终去重题目聚合。
共 2357 道真题 · 当前筛选命中 4 道 · 更新 2026-08-05
筛选题目已选:tech:deepspeed
考察点
技术栈
第 1 题你提到用DeepSpeed做SFT训练,请讲一下DeepSpeed ZeRO Stage 1-3的区别,以及什么时候用FSDP(Fully Sharded Data Parallel)会更好? 考察对分布式训练显存优化技术、原理区别与选型判断第 2 题请讲一下DeepSpeed ZeRO Stage 1-3的区别,以及在什么情况下使用FSDP会更好? 考察分布式训练中显存优化策略的原理理解与选型能力第 3 题你提到用DeepSpeed做SFT训练,请讲一下DeepSpeed ZeRO Stage1-3的区别,以及什么时候用FSDP会更好? 考察对分布式训练显存优化技术的理解与选型能力第 4 题DeepSpeed 的三个阶段在分配参数时,单机 8 卡和双机 16 卡,每张卡上分配的参数量是一样的吗?为什么? 考察对 DeepSpeed ZeRO 分片机制和集群规模对参数分配影响的理解