如何将mysql数据导入hive中

Posted 大王学大数据

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了如何将mysql数据导入hive中相关的知识,希望对你有一定的参考价值。

1.首先在hive中建表(尽量与mysql字段对应)

 

 2. 将mysql中的表导出 txt格式

 

 3.通过hadoop 上传到HDFS上

命令

hadoop dfs -put /home/hadoop/dim_station_trans_com_info.txt  /user/hive/external/tables/dim/dim_station_trans_com_info

前面为 hadoop文件地址 ,后面为HDSF文件地址。

4.查看HDFS上是否成功

 

 上传成功

4.将这个文件导入hive数据库

load data inpath \'//user/hive/external/tables/dim/dim_station_trans_com_info/dim_station_trans_com_info.txt\' into table dim_station_trans_com_info;

 

以上是关于如何将mysql数据导入hive中的主要内容,如果未能解决你的问题,请参考以下文章

如何使用 sqoop 将 Mysql 中的所有表导入到 hive 中用于 hive 中的特定数据库?

如何利用sqoop将hive数据导入导出数据到mysql

如何将mysql数据导入Hadoop之Sqoop安装

linux中sqoop实现hive数据导入到mysql

如何把hive导出到本地的表导入mysql中

怎么用spark 将mysql数据导入 hive