Hive新增表在Impala查不到问题解决

Posted 赵广陆

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了Hive新增表在Impala查不到问题解决相关的知识,希望对你有一定的参考价值。

1 问题产生

Impala和hive一起使用,当我们在HIVE中新增一张表时,我们发现在Impala中不能及时查看到新增表,这是因为元数据信息没有及时刷新,在impala里执行invalidate metadata命令刷新元数据即可。
这里我们简单测试

HIVE中新建一张表并查看

CREATE TABLE test_01(
id INT,name STRING,sex STRING,dataday STRING);
--HIVE中查看新增表
hive> show tables;
OK
test_01
test_table

Impala中查看相关信息,此时并没有新增表

+--------------------------------------+
| name                                 |
+--------------------------------------+
| test_table                           |
+--------------------------------------+

执行invalidate metadata命令后再次查看

[nd3:21000] default> invalidate metadata;
--Impala中再次查看表信息
[nd3:21000] default> show tables;
+--------------------------------------+
| name                                 |
+--------------------------------------+
| test_01                              |
| test_table                           |
+--------------------------------------+

2 补充说明

我们可以使用refresh tableName来刷新指定的表。

[nd2:21000] default> refresh test_table;
Query: refresh test_table
Fetched 0 row(s) in 0.05s

以上是关于Hive新增表在Impala查不到问题解决的主要内容,如果未能解决你的问题,请参考以下文章

Impala并发查询缓慢问题解决方案

怎么把impala表导入kudu

Impala/Hive - 汇总调整代码的金额

hive表在写入过程中可以读取吗

如何在 HBase 和 Impala 中提取给定日期而不与 hive 集成的星期几?

PySpark 和 HIVE/Impala