hive数据导入Sqoop工具

Posted ggzhangxiaochao

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了hive数据导入Sqoop工具相关的知识,希望对你有一定的参考价值。

下载Sqoop ,直接解压缩;然后导入2个环境变量

 

技术分享图片

1、导入oracle数据库中表emp的数据到hive表中

技术分享图片

技术分享图片

1、导入到HDFS中

技术分享图片

$ sqoop import --connect jdbc:mysql://database.example.com/employees     --username aaron --password 12345
--connect用来链接数据库,--table选择一个表,--colums选择列,-m选择mapreduce任务数量,--target-dir选择导入到HDFS的路径
2、导入Hive数据仓库中

技术分享图片

3、制定表的名字,导入到hive中指定的表中

技术分享图片

4、制定条件

技术分享图片

--hive-table导入到hive‘中制定的emp2表中,若不存在,则创建,--where指明条件

5、查询语句 query

技术分享图片

6、导出数据

技术分享图片

 

技术分享图片

 

 

 



以上是关于hive数据导入Sqoop工具的主要内容,如果未能解决你的问题,请参考以下文章

数据工具sqoop用法之mysql与hive数据导入导出

sqoop mysql数据变化怎么导入

Sqoop 导入所有未与 Hive 数据库同步的表

Sqoop导入所有不与Hive数据库同步的表

sqoop 将数据导入hive

Sqoop从本地MySQL导入到Hive为啥要求Sqoop一定要在HDFS中