简述Spark作业调度 ？
Spark作业调度是指在Spark应用程序中，如何高效地组织和管理作业的执行流程。它主要涉及以下几个方面：
-
DAG调度：Spark作业首先被转化为一个有向无环图（DAG），其中的节点表示RDD的转换操作，边表示数据的依赖关系。DAG调度器（DAGScheduler）根据这个图来决定任务（Tasks）的执行顺序。
-
阶段划分：DAGScheduler将DAG划分为多个阶段（Stages）。一个阶段包含了可以并行执行的任务集合，通常是直到遇到一个宽依赖（例如shuffle操作）为止。
-
任务调度与分配：每个阶段被划分成多个任务，这些任务由TaskScheduler负责调度。TaskScheduler负责