深入理解Spark 2.1 Core (八):Standalone模式容错及HA的原理与源码分析_spark中standalone-ha原理-CSDN博客

网站介绍:文章浏览阅读2k次。第五、第六、第七篇博文,我们讲解了Standalone模式集群是如何启动的,一个App起来了后,集群是如何分配资源,Worker启动Executor的,Task来是如何执行它,执行得到的结果如何处理,以及app退出后,分配了的资源如何回收。但在分布式系统中,由于机器众多,所有发生故障是在所难免的,若运行过程中Executor、Worker或者Master异常退出了,那该怎么办呢?这篇博文,我们就来讲_spark中standalone-ha原理