Spark系列文章一:Spark 提交任务流程详解_spark任务提交流程-CSDN博客

网站介绍:文章浏览阅读6.6k次,点赞4次,收藏29次。一、spark提交任务流程概述1.1、流程概述1、构建spark执行环境(初始化sparkcont);2、SparkContext向资源管理器注册并申请Executor资源;3、资源管理器分配Executor资源,Executor向资源管理器发送心跳汇报状态;4、Executor向sc注册并申请task;5、sc向Executor发送task,Executor执行task;6、运行完成后,sc向资源管理器申请注销资源。1.2、流程图解(多图)二、spark..._spark任务提交流程