Spark on yarn 配置_spark on yarn配置-CSDN博客

网站介绍:文章浏览阅读1.6k次。1、环境介绍操作系统:centos 7.9jdk版本:8u291hadoop版本:2.10.1spark版本:2.4.8 (因为自建了hadoop 所以使用without-hadoop包)spark下载地址:https://archive.apache.org/dist/spark/spark-2.4.8/注:spark on yarn 运行方式有两种 client和cluster模式:client方式:任务调度driver,运行在当前提交程序的客户机上,作业完成前不能关闭,显示输出在客_spark on yarn配置