网站介绍:文章浏览阅读916次。1. 预备操作已经有的环境包括:spark 2.4.5 集群 anaconda 虚拟环境python3.7 (由于集群spark环境为2.4.5,python版本必须<3.8) 配置好$SPARK_HOME、$JAVA_HOME 环境变量2. 本次操作命令行操作:# 查看并进入相应虚拟环境conda info --envsconda deactivateconda activate caret# 进入相应虚拟环境后,安装包conda search pyspark _jupyer pyspark on yarn
- 链接地址:https://blog.csdn.net/yuxeaotao/article/details/124977207
- 链接标题:【Pyspark】在jupyter中运行pyspark,且为yarn-client模式_jupyer pyspark on yarn-CSDN博客
- 所属网站:blog.csdn.net
- 被收藏次数:152
- 网站标签:jupyer pyspark on yarn