我要招人

京东面试题更新 2026-08-05

执行一个PySpark作业，它的底层操作是怎么样的？

京东后端开发电商性能优化系统设计技术原理Apache SparkPySpark

考察说明

考察对PySpark执行模型、任务调度和底层计算原理的理解

回答思路

  1. 能说明PySpark通过Driver和Executor的结构执行任务
  2. 能解释DAG构建、Stage划分和任务（Task）调度过程
  3. 能阐述Spark Core与Python进程交互方式（Py4J或Arrow）
  4. 能说明RDD/DataFrame的惰性计算与Action触发机制