Spark运行模式详解_spark local client区别-CSDN博客

网站介绍:文章浏览阅读438次。二、Spark运行模式2.1 local模式Local 模式就是指的只在一台计算机上来运行 Spark.通常用于测试的目的来使用 Local 模式, 实际的生产环境中不会使用 Local 模式.2.2 Spark 核心概念介绍2.2.1 MasterSpark 特有资源调度系统的 Leader。掌管着整个集群的资源信息,类似于 Yarn 框架中的 ResourceManager,主要功能:监听 Worker,看 Worker 是否正常工作;Master 对 Worker、Applicatio_spark local client区别