网站介绍:standalone集群:主从架构:Master-servers结构Spark应用架构组成:driver Program + Executorsdriver Program:应用管理者;Executors:线程池;一个worker中有一个Executor,每个Executor可以执行多个Job任务,每 个Job任务能被分成多个Task去放到不同 Executor去执行也就是说 task是最小的执行单位Historyserver:无论在哪台节点下开启 都能读取hdfs的日志启动服务进程:_spark standalone 主从
- 链接地址:https://blog.csdn.net/qq_45769990/article/details/115979416
- 链接标题:Spark_standalone集群_spark standalone 主从-CSDN博客
- 所属网站:blog.csdn.net
- 被收藏次数:6863
- 网站标签:spark standalone 主从