八股文_大数据

简述Spark怎么基于内存计算的？

八股文_Spark

简述Spark怎么基于内存计算的？

参考回答： Spark通过将数据存储在内存中进行计算，采用了“内存计算”（In-memory...

87

简述Spark参数（性能）调优？

八股文_Spark

简述Spark参数（性能）调优？

参考回答： Spark的性能调优主要通过调整其各种配置参数来实现。通过合理配置资源、内存、并...

90

简述Spark的batchsize，怎么解决小文件合并问题？

八股文_Spark

简述Spark的batchsize，怎么解决小文件合并问题？

参考回答：在Spark中，batchSize指的是每个批次中处理的数据量大小，通常用来控制...

80

简述Executor如何内存分配？

八股文_Spark

简述Executor如何内存分配？

参考回答：在Spark中，Executor负责执行任务并存储数据。每个Executor的内...

77

八股文_Spark

简述RDD的容错机制？

参考回答： RDD（Resilient Distributed Dataset）是Spark...

109

简述Spark容错机制（重点）？

八股文_Spark

简述Spark容错机制（重点）？

参考回答： Spark的容错机制主要是通过RDD的血统信息（Lineage）来实现的。当某个...

93

简述DAGScheduler如何划分？

八股文_Spark

简述DAGScheduler如何划分？

参考回答： DAGScheduler是Spark中负责将DAG（有向无环图）划分为多个阶段（...

60

简述Spark的DAG以及它的生成过程？

八股文_Spark

简述Spark的DAG以及它的生成过程？

参考回答：在Spark中，DAG（Directed Acyclic Graph，有向无环图...

84

17/40 上一页 14 15 16 17 18 19 20 下一页