作业帮面试题 · tech:deepspeed
作业帮相关面试题,按最终去重题目聚合。
共 1635 道真题 · 当前筛选命中 7 道 · 更新 2026-08-05
筛选题目已选:tech:deepspeed
考察点
技术栈
第 1 题DeepSpeed如何将模型和优化器切分到多卡上,有哪些并行方式? 考察对DeepSpeed ZeRO和常见并行策略的理解第 2 题你使用过 DeepSpeed 吗?请介绍一下它的核心功能和典型应用场景。 考察对分布式训练框架 DeepSpeed 的掌握程度和实践经验第 3 题请讲解 DeepSpeed 的原理,重点说明 ZeRO 的三个阶段以及 offload 机制。 考察对分布式训练显存优化核心原理的理解第 4 题请详细介绍你在项目中应用Prompt工程、模型微调和DeepSpeed的具体实践与难点。 考察LLM工程化实践经验、技术选型和问题排查能力第 5 题大模型训练有哪几种并行方式,各自解决什么问题? 考察对分布式训练并行策略的整体认知第 6 题如何估算大模型微调时的显存需求?请结合 DeepSpeed 的典型配置举例说明。 考察对大模型训练/微调显存构成的理解及工程估算能力第 7 题如果不用LoRA,直接全参数微调一个7B模型,需要多少显存? 考察混合精度下全参数微调的显存估算能力