Spark03:Spark安装部署【集群】:Standalone模式以及ON YARN模式_spark on yarn 和 spark along-CSDN博客

网站介绍:文章浏览阅读2.4k次。一、Spark集群安装部署Spark集群有多种部署方式,比较常见的有Standalone模式和ON YARN模式1、Standalone模式Standalone模式就是说部署一套独立的Spark集群,后期开发的Spark任务就在这个独立的Spark集群中执行2、ON YARN模式ON YARN模式是说使用现有的Hadoop集群,后期开发的Spark任务会在这个Hadoop集群中执行,此时这个Hadoop集群就是一个公共的了,不仅可以运行MapReduce任务,还可以运行Spark任务,这样集群的资_spark on yarn 和 spark along