文章浏览阅读514次。今天尝试Alluxio整合spark 运行时结果报错，如下Caused by: java.lang.reflect.InvocationTargetException: java.lang.IllegalArgumentException: Compression codec com.hadoop.compression.lzo.LzoCodec not found. at sun.reflect.NativeMethodAccessorImpl.invoke0(Native......

文章浏览阅读303次。--postgresSQL写法 需求都是同一roadid下，求每15分钟的均速km/h create table if not exists avg_speed_week_day0 as ( select c.roadid,c.week_day, max(case when cast(btrim(c.times,'h')as int) = 000 then c.avg_sp..._postgres string to map...

文章浏览阅读2.8w次，点赞63次，收藏219次。本系列几章系统地介绍了开发中Hive常见的用户配置属性（有时称为参数，变量或选项），并说明了哪些版本引入了哪些属性，常见有哪些属性的使用，哪些属性可以进行Hive调优，以及......

文章浏览阅读1w次，点赞3次，收藏13次。文章目录1、在Hive cli中往表中插入记录，报错信息如下错误信息a错误信息b1、在Hive cli中往表中插入记录，报错信息如下错误信息aUnrecognized Hadoop major version number: 3.2.0当时环境版本信息：ha......

文章浏览阅读2.7k次。1.目前我所使用的kylin版本为2.6.2，有时在完成一次构建后会出现fail to locate kylin.properties的异常，如图所示经排查，定位到kylin源码中的org.apache.kylin.engine.mr.common.AbstractHadoopJob中的loadKylinPropsAndMetadata方法，如......

文章浏览阅读2.7k次。1.目前我所使用的kylin版本为2.6.2，有时在完成一次构建后会出现fail to locate kylin.properties的异常，如图所示经排查，定位到kylin源码中的org.apache.kylin.engine.mr.common.AbstractHadoopJob中的loadKylinPropsAndMetadata方法，如......

文章浏览阅读2.7k次。1.目前我所使用的kylin版本为2.6.2，有时在完成一次构建后会出现fail to locate kylin.properties的异常，如图所示经排查，定位到kylin源码中的org.apache.kylin.engine.mr.common.AbstractHadoopJob中的loadKylinPropsAndMetadata方法，如......

文章浏览阅读2.7k次。1.目前我所使用的kylin版本为2.6.2，有时在完成一次构建后会出现fail to locate kylin.properties的异常，如图所示经排查，定位到kylin源码中的org.apache.kylin.engine.mr.common.AbstractHadoopJob中的loadKylinPropsAndMetadata方法，如......

文章浏览阅读4.5k次，点赞2次，收藏17次。spark是什么？spark是针对于大规模数据处理的统一分析引擎，通俗点说就是基于内存计算的框架spark和hive的区别？1.spark的job输出结果可保存在内存中，而MapReduce的job输出结果只能保存在磁......

文章浏览阅读3.6k次，点赞2次，收藏21次。CDH6资料链接：https://pan.baidu.com/s/1Dz6erkGa0oehfoIjG0wyOg提取码：k66v虚拟机准备设置hadoop101、hadoop102、hadoop103的主机对应内存分别是：8G、8G、8G(我的是10、2、2 没内存0.0)SSH免密登录生成公钥和......