Spark Metrics配置详解-CSDN博客

网站介绍:文章浏览阅读3.1k次。和Hadoop类似,在Spark中也存在很多的Metrics配置相关的参数,它是基于Coda Hale Metrics Library的可配置Metrics系统,我们可以通过配置文件进行配置,通过Spark的Metrics系统,我们可以把Spark Metrics的信息报告到各种各样的Sink,比如HTTP、JMX以及CSV文件。  Spark的Metrics系统目前支持以下的实例: _spark metrics