后端岗位面试题更新 2026-08-05
请说明Spark是如何处理小文件问题的？
字节跳动后端开发互联网/IT问题拆解技术原理Apache Spark
考察说明
考察对Spark小文件问题的成因、影响及常见处理策略的理解
回答思路
- 说明小文件产生的常见场景，如流式写入、分区过度
- 强调小文件对HDFS元数据压力和Spark任务调度的影响
- 列举合并小文件的具体手段，如repartition/coalesce、调整分区大小、动态分区优化
- 说明如何结合业务场景选择合适策略
本题附完整参考答案与评分标准
登录后可查看结构化答题指导；也可以直接开一场模拟面试，AI 面试官用本题实时追问并给出评分。
