hive表添加字段导致历史分区查询报错

Posted 2021-12-04 一定要努力努力再努力

一般由于业务需要，会对hive的表有增加字段的操作，如下：

ALTER TABLE 库名.表名 add columns (字段名 字段类型  comment '注释') ;

但是上面这种语法只能是对表的当前和以后新的分区生效，若存在历史分区，那么mysql上的元数据信息没有修改。
若查询历史分区，就会报上面的return code 2
解决方案：
1、直接在添加字段的时候加上 CASCADE

ALTER TABLE 库名.表名 add columns (字段名 字段类型  comment '注释')  CASCADE;

官方给出解释：cascade的中文翻译为“级联”，也就是不仅变更新分区的表结构（metadata），同时也变更旧分区的表结构
2、若没加CASCADE已经修改了表结构了，可以在查询时设置下面参数

set hive.vectorized.execution.enabled=false;--关闭矢量查询
set hive.vectorized.execution.reduce.enabled=false;