【记录】spark任务提交yarn-cluster一直accepted问题_python 提交spark运行 一直accepted-CSDN博客

网站介绍:文章浏览阅读1.2k次。问题一:spark 提交任务时,在resourcemanager上提交任务能执行,在其他机器上提交不了问题二:spark任务提交yarn时,用cilent模式不报错,换成cluster一直accepted问题一排查:检查配置文件 spark-env.sh spark-defaults.conf发现在spark-env.sh 中指定的 HADOOP_CONF_DIR 有误,并不是现在正在用的版本的hadoop的配置文件,在进行更改后,第一个问题解决问题二排查:代码有误..._python 提交spark运行 一直accepted