Spark SQL处理decimal类型空指针异常(spark.sql.hive.convertMetastoreParquet)-CSDN博客

网站介绍:文章浏览阅读1.9k次。系列三在此之前可以先阅读文章:SparkSQL与Hive metastore Parquet转换但如果同时设置spark.sql.hive.convertMetastoreParquet为false时,要注意一些数据类型以及精度的处理,比如对于decimal类型的处理。通过一个例子复原一下当时的场景:1.创建Hive外部表testdb.test_decimal,其中字段fee_rate为decimal(10,10)CREATE EXTERNAL TABLE `testdb`.`test_decima_convertmetastoreparquet