Spark

简述Spark on Standalone运行过程？

Spark

简述Spark on Standalone运行过程？

在 Spark Standalone 模式下的运行过程涉及以下几个关键步骤：启动集群：首先...

5月前 12

简述为什么要根据宽依赖划分Stage ？

Spark

简述为什么要根据宽依赖划分Stage ？

在Spark中，根据宽依赖来划分Stage（阶段）是为了优化计算过程和提高执行效率。Stag...

5月前 26

简述map和mapPartition的区别？

Spark

简述map和mapPartition的区别？

在Apache Spark中，map和mapPartitions都是用于转换RDD（弹性分布...

5月前 10

简述SparkContext 与 SparkSession之间的区别是什么？

Spark

简述SparkContext 与 SparkSession之间的区别是什么？

SparkContext： SparkContext是Spark的原始入口点，用于连接Spa...

5月前 24

简述Spark参数（性能）调优？

Spark

简述Spark参数（性能）调优？

在Spark中进行参数调优是优化作业性能的关键步骤。下面我将简要介绍一些主要的性能调优策略和...

5月前 6

简述Spark怎么保证数据不丢失？

Spark

简述Spark怎么保证数据不丢失？

Spark通过多种机制确保数据在处理过程中不丢失，从而提供高度的容错性。这些机制包括： RD...

5月前 10

Spark

简述Spark部署模式？

Spark 支持多种部署模式，以适应不同的计算环境。主要的部署模式包括：本地模式：在这种模...

5月前 66

Spark SQL的GroupBy会造成窄依赖吗？

Spark

Spark SQL的GroupBy会造成窄依赖吗？

Spark SQL 中的 GroupBy 操作通常会导致宽依赖。这是因为 GroupBy 操...

5月前 47

1/131 2 3 4 5 6 下一页