Hive SQL,使用UNION ALL 纵向合并表,当字段为空值时报错

使用UNION ALL纵向合并表,当字段为空值时报错如下:

SQL 错误 [40000] [42000]: Error while compiling statement: FAILED: SemanticException org.apache.hadoop.hive.ql.metadata.HiveException: The column KEY._col1:0._col0 is not in the vectorization context column map {KEY._col0=0, KEY._col1=1}.

说明:客户端用的 DBeaver

尝试了各种方式解决,最终办法:

第一种:

在SQL前加上:

set hive.vectorized.execution.enabled=false;

如果是true就会报错。

第二种(推荐):

不用 UNION ALL 纵向合并,如果是对同一个数据表进行不同粒度的汇总,可换成用grouping sets,具体用法见:

Hive之grouping sets用法及grouping_id计算方法

第三种(这种有时候可用,有时候还是报错):

把空字段用“常量”填充或者NULL填充(字段类型要保持一致)