网站介绍:文章浏览阅读322次。1)配置zookeeper2)修改spark_env.sh文件,spark的master参数不在指定,添加如下代码到各个master节点export SPARK_DAEMON_JAVA_OPTS="-Dspark.deploy.recoveryMode=ZOOKEEPER-Dspark.deploy.zookeeper.url=zk01:2181,zk02:2181,zk03:2181 -Dspark.deploy.zookeeper.dir=/spark"3)将spark_env.sh分发到各个节_airflow中sparksubmitoperator如何修改master的配置
- 链接地址:https://blog.csdn.net/weixin_59295776/article/details/122068303
- 链接标题:如何配置spark master的 HA_airflow中sparksubmitoperator如何修改master的配置-CSDN博客
- 所属网站:blog.csdn.net
- 被收藏次数:7163
- 网站标签:airflow中sparksubmitoperator如何修改master的配置