【大数据】spark Yarn的使用(5) - Driver和Executor_yarn总是分配driver,但不分配excutor-CSDN博客

网站介绍:文章浏览阅读653次。在local模式下 驱动程序driver就是执行了一个Spark Application的main函数和创建Spark Context的进程,它包含了这个application的全部代码。(在那台机器运行了应用的全部代码创建了sparkContext就是driver,以可以说是你提交代码运行的那台机器)Driver:使用Driver这一概念的分布式框架有很多,比如hive,Spark中的Driver即运行Application的main()函数,并且创建SparkContext,创建SparkConte_yarn总是分配driver,但不分配excutor