其他分享
首页 > 其他分享> > spark--专业术语加强(图解)

spark--专业术语加强(图解)

作者:互联网

专业术语加强

Application/App:Spark应用程序

在这里插入图片描述

Driver:驱动程序

ClusterManager-资源管理器Master/ResourceManager

在这里插入图片描述

从节点-Worker/NodeManager

Executor:执行器/执行进程

RDD:弹性分布式数据集

NarrowDependency窄依赖

ShuffleDependency宽依赖

DAG有向无环图

在这里插入图片描述

DAGScheduler[了解]

在这里插入图片描述

TaskScheduler[了解]

在这里插入图片描述

Job

在这里插入图片描述

Stage

TaskSet

在这里插入图片描述

Task

整体图示

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

标签:Task,--,分区,RDD,依赖,Executor,spark,专业术语,Spark
来源: https://blog.csdn.net/qq_46893497/article/details/114004368