数据仓库Hive数据导入导出

Posted 因为专注。所以专业

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了数据仓库Hive数据导入导出相关的知识,希望对你有一定的参考价值。

Hive库数据导入导出

1、新建表data

hive (ebank)> create table data(id int,name string)

            > ROW FORMAT DELIMITED

            > FIELDS TERMINATED BY‘\t‘     

            > stored as textfile;

OK

Time taken: 0.257 seconds

2、向data表中插入数据

hive (ebank)> load data local inpath ‘/home/hive/data.txt‘ overwrite into table data;

Loading data to table ebank.data

Table ebank.data stats: [numFiles=1, numRows=0, totalSize=33, rawDataSize=0]

OK

Time taken: 0.909 seconds

3、查询表中数据

hive (ebank)> select * from data;

OK

data.id data.name

101     张三

102     李四

103     王五

Time taken: 0.092 seconds, Fetched: 3 row(s)

4、表中数据落地

[[email protected] result]$ hive -e "select * from ebank.data" >> /home/hive/result/data.txt

 

Logging initialized using configuration in file:/etc/hive/2.5.3.0-37/0/hive-log4j.properties

OK

Time taken: 1.283 seconds, Fetched: 3 row(s)

5、查看落地的数据

[[email protected] result]$ head data.txt

data.id data.name

101     张三

102     李四

103     王五

6、新建一张和data相同表结构的表data002

hive (ebank)> create table data002 like data;

OK

Time taken: 5.533 seconds

7、查看新建表结构

hive (ebank)> desc data002;

OK

col_name        data_type       comment

id                int                                         

name             string                                      

Time taken: 1.298 seconds, Fetched: 2 row(s)

8、落地的数据文件再次入表

hive (ebank)> load data local inpath ‘/home/hive/result/data.txt‘ overwrite into table data002;

Loading data to table ebank.data002

Table ebank.data002 stats: [numFiles=1, numRows=0, totalSize=51, rawDataSize=0]

OK

Time taken: 39.613 seconds

9、查看新表中数据

hive (ebank)> select * from data002;

OK

data002.id      data002.name

NULL    data.name------------>(这一行为原表表头)

101     张三

102     李四

103     王五

Time taken: 3.874 seconds, Fetched: 4 row(s)

 

以上是关于数据仓库Hive数据导入导出的主要内容,如果未能解决你的问题,请参考以下文章

如何将excel中的数据导入hive仓库中

数据仓库 数据可视化 Hive导出到MySql

通过sqoop工具从hive仓库中导出数据到mysql表中,只有部分数据导出,是什么原因

数据仓库----Hive进阶篇 一

Hive简单实操

电商数据仓库项目简介