Spark历史服务器配置与使用_spark.eventlog.dir=hdfs://asda1/user/asda1/logs/k2-CSDN博客

网站介绍:文章浏览阅读1.1k次。介绍spark也有历史服务器,监控已经运行完成的spark applicationstart-history-server.sh(1)将application运行的日志信息保存起来MapReduce运行的时候,启动了日期聚集功能:将日志信息 上传到HDFS目录(2)启动一个服务读取日志信息,以便前端页面展示MrHistoryServer配置Spark HistoryServer1...._spark.eventlog.dir=hdfs://asda1/user/asda1/logs/k2k