Spark集群安装部署_那我们通过这个spark客户点节点,向hadoop集群上提交spark任务-CSDN博客

网站介绍:文章浏览阅读2k次。Spark集群安装部署Spark集群有多种部署方式,比较常见的有Standalone模式和ON YARN模式Standalone模式就是说部署一套独立的Spark集群,后期开发的Spark任务就在这个独立的Spark集 群中执行ON YARN模式是说使用现有的Hadoop集群,后期开发的Spark任务会在这个Hadoop集群中执行, 此时这个Hadoop集群就是一个公共的了,不仅可以运行MapReduce任务,还可以运行Spark任务, 这样集群的资源就可以共享了,并且也不需要再维护一套集群了,减少了_那我们通过这个spark客户点节点,向hadoop集群上提交spark任务