后端岗位面试题更新 2026-08-05

请描述 Spark 中 Shuffle 的原理与执行流程。

网易后端开发互联网/IT性能优化技术原理技术选型Apache Spark

考察说明

考察对 Spark Shuffle 底层机制、磁盘与网络开销的掌握

回答思路

  1. 说明 Map 端与 Reduce 端的分区与数据组织
  2. 解释 Shuffle Write 与 Shuffle Read 的流程
  3. 对比 Hash Shuffle 与 Sort Shuffle 的差异
  4. 提及数据倾斜与调优策略
本题已收录答题指导

本题附完整参考答案与评分标准

登录后可查看结构化答题指导;也可以直接开一场模拟面试,AI 面试官用本题实时追问并给出评分。