Spark On Yarn的一些配置_idea的spark on yarn怎么配置-CSDN博客

网站介绍:文章浏览阅读520次。1,配置/etc/profile中HADOOP_CONF_DIR目的是为了让Spark找到core-site.xml、hdfs-site.xml和yarn-site.xml【让spark知道NameNode、ResourceManager】export HADOOP_CONF_DIR=/bigdata/hadoop-2.7.7/etc/hadoop/2,修改hadoop-2.7.7/etc/hadoop/capacity-scheduler.xml<property> _idea的spark on yarn怎么配置