将CSV文件导入到hive数据库

Posted bread-wang

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了将CSV文件导入到hive数据库相关的知识,希望对你有一定的参考价值。

将csv文件导入hive后出现了所有的字段只显示在新建的表的第一个字段中,后面的字段全是null.

出现这种的原因是hive以行分隔数据,需要修改为按逗号‘  ,  ‘ 进行分隔读取,

具体操作如下,

首先在hive中创建自己的table,  并且设置以逗号分隔。

 

 create table IP(ip varchar(30), country varchar(30), province varchar(30), city varchar(30), district varchar(30), linetype varchar(30))

 row format delimited fields terminated by ‘,‘ ;

 

然后再输入导入的语句:

load data local inpath ‘/usr/testFile/result.csv‘ overwrite into table biao;

(load data local inpath ‘文件路径‘ overwrite into table 表名;)

 

 

然后最后查询

show tables;

 

select * from ip limit 100;

 

OK,搞定了.

以上是关于将CSV文件导入到hive数据库的主要内容,如果未能解决你的问题,请参考以下文章

如何将excel中的数据导入hive仓库中

csv数据导入hive

hive导入csv文件,字段中双引号内有逗号

hive导入到clickhouse的几种方式总结

如何在使用 EMR/Hive 将数据从 S3 导入 DynamoDB 时处理包含在引号 (CSV) 中的字段

Hive导数