Spark历史日志服务器开启及配置_spark.eventlog.enabled-CSDN博客

网站介绍:文章浏览阅读822次。可以使用历史日志服务器查看以前的job执行日志临时配置,对本次提交的应用程序起作用:./spark-shell --master spark://node1:7077--name myapp1--conf spark.eventLog.enabled=true--conf spark.eventLog.dir=hdfs://node1:9000/spark/test停止程序,在 Web Ui 中 Completed Applications 对应的ApplicationID 中能查看 his_spark.eventlog.enabled