阿里云面试题更新 2026-08-05

请分别解释梯度累计、梯度检查点(gradient checkpointing)、联邦学习、分布式训练中的负载卸载(offload),以及它们在大型模型训练中的作用和适用场景。

阿里云人工智能专业服务技术原理方案权衡PyTorchTensorFlow

考察说明

考察对大型模型训练中核心优化技术的理解深度和应用边界

回答思路

  1. 准确解释每种技术的核心机制
  2. 说明各自解决的问题和适用场景
  3. 指出技术之间的关联或权衡
  4. 结合具体训练场景说明选择理由