[Hive]Hive使用union all报错missing EOF 解决方案

Posted

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了[Hive]Hive使用union all报错missing EOF 解决方案相关的知识,希望对你有一定的参考价值。

参考技术A 1.union all 的每张表都要用简称命名,否则报错。

一天天的净跟这些蠢坑周旋……

2、union all的每张表都不支持limit、order by等函数,否则报错。

解决方案:外面套一层,再union all即可。

语法:

select * from 

     (select * from xx)a

union all 

select * from

    (select * from xx)b

Hive学习之Union和子查询

Union的语法格式如下:

select_statement UNION ALL select_statement UNION ALL select_statement ... 

Union用于将多个SELECT语句的查询结果合并到一个结果集中,目前Hive只支持UNION ALL,也就是结果集中的重复记录不会被删除。SELECT语句返回列的数目和名称必须相同,否则会报schema错误。Union语句还可以嵌套在FROM子句中:

SELECT *  
FROM (  
  select_statement  
  UNION ALL  
  select_statement  
) unionResult  

    在Hive-0.12.0及之前的版本中,Union只能在子查询中使用,在Hive-0.13.0版本中,去除了该限制,Union查询可以作为独立的查询使用

    看过了Union后,现在来看看子查询。在Hive-0.12.0及之前的版本中子查询只能出现在FROM子句中,且必须给定一个名称,因为每个在FROM子句中的表必须拥有名称。子查询中的列必须有唯一的名称,子查询中的列在外部查询中可以像表中的列那样使用,子查询也可以是Union查询,Hive支持任意层的子查询。具体语法如下:

SELECT ... FROM (subquery) name ...  
SELECT ... FROM (subquery) AS name ... //AS关键字是在Hive-0.13.0中引入的  

下面是包含Union all子查询的例子:

SELECT t3.col  
FROM (  
  SELECT a+b AS col  
  FROM t1  
  UNION ALL  
  SELECT c+d AS col  
  FROM t2  
) t3 

从Hive-0.13.0开始,某些类型的子查询可以出现在WHERE子句中,这些子查询的结果可以被IN、NOT IN、EXISTS和NOT EXISTS语句当做常量,也称为不相关查询,因为子查询不引用父查询的列。下面是两个例子:

SELECT *  
FROM A  
WHERE A.a IN (SELECT foo FROM B);   
  
SELECT A  
FROM T1  
WHERE EXISTS (SELECT B FROM T2 WHERE T1.X = T2.Y)  

 子查询的一些限制总结如下:

  • 子查询只能出现在表达式的右侧
  • IN/NOT IN的子查询中只允许选择一列
  • EXISTS/NOT EXISTS必须有一个或者多个相关谓词
  •  对父查询的引用只能出现在子查询的WHERE子句中

转自:http://blog.csdn.net/skywalker_only/article/details/39294183

 

以上是关于[Hive]Hive使用union all报错missing EOF 解决方案的主要内容,如果未能解决你的问题,请参考以下文章

使用 UNION ALL 合并 Hive 中的许多表?

HIVE UNION ALL 带子句

hive里面union all的用法记录

Hive Union ALL - java 空指针异常

UNION ALL 不会在 Hive 中生成任何数据

union all 和 union