详解Spark运行模式(local+standalone+yarn)_YaoYong_BigData的博客-CSDN博客

网站介绍:Spark 有多种运行模式:1.可以运行在一台机器上,称为 Local(本地)运行模式。2.可以使用 Spark 自带的资源调度系统,称为 Standalone 模式。3.可以使用 Yarn、Mesos、Kubernetes 作为底层资源调度系统,称为 Spark On Yarn、Spark On Mesos、Spark On K8S。 Driver 是 Spark 中的主控进程,负责执行应用程序的 main() 方法,创建 SparkContext 对象,负责与 Spark 集群进行_spark运行模式