spark的三种模式的详细运行过程_下面哪种运行模式spark driver运行在提交作业所在客户端的本地机器上-CSDN博客

网站介绍:文章浏览阅读1.4w次,点赞8次,收藏42次。一、Standalone模式1、使用SparkSubmit提交任务的时候(包括Eclipse或者其它开发工具使用new SparkConf()来运行任务的时候),Driver运行在Client;使用SparkShell提交的任务的时候,Driver是运行在Master上2、使用SparkSubmit提交任务的时候,使用本地的Client类的main函数来创建sparkcontext并初始化_下面哪种运行模式spark driver运行在提交作业所在客户端的本地机器上