我要招人

互联网/IT行业面试题更新 2026-08-05

假设使用 Swift 框架在 2 个 node 上进行 MoE 训练，你会如何设置 Swift 参数来分配训练参数？

美团人工智能互联网/IT技术选型方案权衡Swift

考察说明

考察将 MoE 并行策略映射到具体训练框架参数配置的能力

回答思路

  1. 说明 Swift 中并行配置的基本概念（如 expert parallel size）
  2. 解释 2 个 node 场景下如何划分专家和数据并行
  3. 考虑通信拓扑与性能平衡