文章浏览阅读2.5w次。因为spark文档中只介绍了两种用脚本提交到yarn的例子,并没有介绍如何通过程序提交yarn,但是我们的需求需要这样。网上很难找到例子,经过几天摸索,终于用程序提交到yarn成功,下面总结一下。先介绍官......
2024-01-24 09:33 阅读 阅读全文文章浏览阅读999次。在日常开发中,经常会遇到一些情况,就是在Maven中已经下载好了的jar包,在引入pom.xml文件时,存在一种找不到的情况。还有一种情况就是本地一些jar包,需要手动添加到maven仓库的情况。另外还有一种情况......
2024-01-21 12:50 阅读 阅读全文文章浏览阅读1.7k次。瞎搞了半天的插件什么的,只需要下这一个:scala-2.11.11.msi链接:https://pan.baidu.com/s/1b_XjWCNL5VTOLJZAPdMNMw提取码:93pd接着:选择你下载的sdk,就是上面那个链接下载安装的地址,如果导入的时候出现这个错误:......
2024-01-22 21:27 阅读 阅读全文文章浏览阅读402次。hive2.1.1安装_将 mysql-connector-java-5.1.40.jar 放入 $hive_home/lib 下。(mysql jdbc驱动程...
2024-01-24 05:25 阅读 阅读全文文章浏览阅读301次。standalone模式bin/spark-submit \--class org.apache.spark.examples.SparkPi \--master spark://harbor-n0:7077 \./examples/jars/spark-examples_2.11-2.4.4.jar \10yarn client模式bin/spark-submit \--class org.apache.spark.examples.SparkPi \--master yarn \-_spark-examples_2.11......
2024-01-24 07:43 阅读 阅读全文文章浏览阅读5.6k次,点赞4次,收藏5次。Maven 打包忽略依赖jar包之1. 背景作为事实上主流的jar包管理工具,有时候需要考虑工程打包是否包含所依赖jar包,这样可以缩减打出来的bar大小实际maven打包,如果在pom文件中配置了打包......
2024-01-23 19:02 阅读 阅读全文文章浏览阅读1.3k次。在idea里Maven SpringBoot项目打jar没有配置文件的问题解决办法原因:maven在打包(jar)时默认只编译和打包java文件在pom文件中加一下<build> <resources> <resource> <!--路......
2024-01-21 12:56 阅读 阅读全文文章浏览阅读3.8k次,点赞2次,收藏7次。# mysql-connector-java-下载地址mysql-connector-java-5.1.46-bin.jarmysql-connector-java-5.1.47-bin.jarmysql-connector-java-5.1.48-bin.jarmysql-connector-java-5.1.49-bin.jar[官方下载地址](https://downloads.mysql.com/archives/c-j/)下载......
2023-11-11 12:01 阅读 阅读全文文章浏览阅读2.8k次。1.2.3.如果还是没有解决问题然后在build.gradle 里面将 ext.kotlin_version = '1.3.61’设置为自己当前的版本...
2023-11-11 11:53 阅读 阅读全文【问题】Cause: java.sql.SQLException: 不支持的字符集 (在类路径中添加 orai18n.jar): ZHS16GBK...
2024-05-07 00:37 阅读 阅读全文