网站介绍:文章浏览阅读822次。可以使用历史日志服务器查看以前的job执行日志临时配置,对本次提交的应用程序起作用:./spark-shell --master spark://node1:7077--name myapp1--conf spark.eventLog.enabled=true--conf spark.eventLog.dir=hdfs://node1:9000/spark/test停止程序,在 Web Ui 中 Completed Applications 对应的ApplicationID 中能查看 his_spark.eventlog.enabled
- 链接地址:https://blog.csdn.net/yj2434/article/details/109441174
- 链接标题:Spark历史日志服务器开启及配置_spark.eventlog.enabled-CSDN博客
- 所属网站:blog.csdn.net
- 被收藏次数:9976
- 网站标签:spark.eventlog.enabled