如何配置spark master的 HA_airflow中sparksubmitoperator如何修改master的配置-CSDN博客

网站介绍:文章浏览阅读322次。1)配置zookeeper2)修改spark_env.sh文件,spark的master参数不在指定,添加如下代码到各个master节点export SPARK_DAEMON_JAVA_OPTS="-Dspark.deploy.recoveryMode=ZOOKEEPER-Dspark.deploy.zookeeper.url=zk01:2181,zk02:2181,zk03:2181 -Dspark.deploy.zookeeper.dir=/spark"3)将spark_env.sh分发到各个节_airflow中sparksubmitoperator如何修改master的配置