网站介绍:文章浏览阅读535次。JVM 调优一、降低 cache 操作的内存占比1.1 静态内存管理机制1.2 统一内存管理机制二、调节 Executor 堆外内存三、调节连接等待时长对于 JVM 调优,首先应该明确,full gc/minor gc,都会导致 JVM 的工作线程停止工作,即 stop the world。一、降低 cache 操作的内存占比1.1 静态内存管理机制根据 Spark 静态内存管理机制,堆内存被划分为了两块,Storage 和 Execution。Storage 主要用于缓存 RDD 数据和 broa_exiting spark-submit jvm
- 链接地址:https://blog.csdn.net/weixin_43520450/article/details/108651169
- 链接标题:Spark性能优化与故障处理之(4)Spark JVM 调优_exiting spark-submit jvm-CSDN博客
- 所属网站:blog.csdn.net
- 被收藏次数:5136
- 网站标签:exiting spark-submit jvm