后端岗位面试题更新 2026-08-05
请描述 Spark 中 Shuffle 的原理与执行流程。
网易后端开发互联网/IT性能优化技术原理技术选型Apache Spark
考察说明
考察对 Spark Shuffle 底层机制、磁盘与网络开销的掌握
回答思路
- 说明 Map 端与 Reduce 端的分区与数据组织
- 解释 Shuffle Write 与 Shuffle Read 的流程
- 对比 Hash Shuffle 与 Sort Shuffle 的差异
- 提及数据倾斜与调优策略
本题附完整参考答案与评分标准
登录后可查看结构化答题指导;也可以直接开一场模拟面试,AI 面试官用本题实时追问并给出评分。