网站介绍:文章浏览阅读105次。所以Spark Application运行在YARN上时,采用不同DeployMode时架构不一样,企业实际生 产环境还是以cluster模式为主,client模式用于开发测试,两者的区别面试中常问。 1)、Driver在任务提交的本地机器上运行,Driver启动后会和ResourceManager通讯申 请启动 ApplicationMaster; 2)、随后ResourceManager分配Container,在合适的NodeManager上启动 ApplicationMaster._在spark on yarn中如何让每一个executor尽可能的分布到每一个nodemanager上
- 链接地址:https://blog.csdn.net/qq_45769990/article/details/115982125
- 链接标题:Spark on Yarn(二)_在spark on yarn中如何让每一个executor尽可能的分布到每一个nodemanager-CSDN博客
- 所属网站:blog.csdn.net
- 被收藏次数:1593
- 网站标签:在spark on yarn中如何让每一个executor尽可能的分布到每一个nodemanager上