Sqoop 从Hive 导入MySQL 8 提示:org.apache.hadoop.hive.ql.exec.MoveTask. Directory

Posted 在奋斗的大道

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了Sqoop 从Hive 导入MySQL 8 提示:org.apache.hadoop.hive.ql.exec.MoveTask. Directory相关的知识,希望对你有一定的参考价值。

今天使用Sqoop 实现Hive 数据导入mysql 8 提示错误信息如下:


Loading data to table default.hivetomysql
FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.MoveTask. Directory hdfs://Hadoop3-master:9000/user/hive/warehouse/hivetomysql could not be cleaned up.

造成原因:更新hiveTomysql 表中的数据,我清空了default.hiveTomysql 表记录,但是Hive 元数据存在记录导致从新导入数据失败

解决办法:删除表重新导入数据

hive> drop table default.hiveTomysql;
OK
Time taken: 0.916 seconds
hive> use default;
OK
Time taken: 0.07 seconds
hive> CREATE TABLE IF NOT EXISTS hiveTomysql(sid INT,sname string,gender string, age int) ROW FORMAT DELIMITED FIELDS TERMINATED BY ',';
OK
Time taken: 1.071 seconds
hive> load data local inpath '/usr/local/tmp/hiveTomysql' overwrite into table default.hiveTomysql;
Loading data to table default.hivetomysql
OK
Time taken: 1.325 seconds

以上是关于Sqoop 从Hive 导入MySQL 8 提示:org.apache.hadoop.hive.ql.exec.MoveTask. Directory的主要内容,如果未能解决你的问题,请参考以下文章

sqoop从mysql导入到hive中问题

sqoop从mysql导入到hive为啥0变成null

sqoop从oracle数据库抽取数据,导入到hive

使用sqoop从mysql导入数据到hive

Sqoop从本地MySQL导入到Hive为啥要求Sqoop一定要在HDFS中

如何使用 Sqoop 从 MySQL 增量导入到 Hive?