使sqoop能够启用压缩的一些配置

Posted 再也伤不起

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了使sqoop能够启用压缩的一些配置相关的知识,希望对你有一定的参考价值。

 

在使用sqoop 将数据库表中数据导入至hdfs时 配置启用压缩

 

 hadoop 的命令    检查本地库支持哪些  bin/hadoop checknative  

 

需要配置native    要编译版本 

删除hadoop安装目录 lib 下的native文件夹

 将解压好的native文件 拷贝到hadoop  lib目录下

 

 

 

然后在执行 bin/hadoop checknative   就会发现有了很多东西

 

然后在执行导入语句

 

 

以上是关于使sqoop能够启用压缩的一些配置的主要内容,如果未能解决你的问题,请参考以下文章

sqoop

sqoop

sqoop

Confluence 6 启用嵌套用户组

Confluence 6 启用嵌套用户组

orc文件压缩、本地导出、查看、下载