解决 Unable to load native-hadoop library for your platform

Posted 2020-10-14 chengjunde

 

安装hadoop启动之后总有警告：Unable to load native-hadoop library for your platform... using builtin-java classes where applicable

 

原因：
Apache提供的hadoop本地库是32位的，而在64位的服务器上就会有问题，因此需要自己编译64位的版本。

 

1、首先找到对应自己hadoop版本的64位的lib包，可以自己手动去编译，但比较麻烦，也可以去网上找，好多都有已经编译好了的。

 

2、可以去网站：http://dl.bintray.com/sequenceiq/sequenceiq-bin/  下载对应的编译版本

 

3、将准备好的64位的lib包解压到已经安装好的hadoop安装目录的lib/native 和 lib目录下：

 

 

 

[java] view plain copy

 

1. [hadoop@hadoopTest ~]$ tar -xvf hadoop-native-64-2.7.0.tar -C hadoop-2.7.2/lib/native  

 

[java] view plain copy

 

1. [hadoop@hadoopTest ~]$ tar -xvf hadoop-native-64-2.7.0.tar -C hadoop-2.7.2/lib  

 

4、然后增加环境变量：

 

 

 

 

[java] view plain copy

 

1. [hadoop@hadoopTest hadoop-2.7.2]$ vi /etc/profile  

5、增加下面的内容：

 

 

 

 

[java] view plain copy

 

1. export HADOOP_COMMON_LIB_NATIVE_DIR=$HADOOP_HOME/lib/native  
2. export HADOOP_OPTS="-Djava.library.path=$HADOOP_HOME/lib"  

6、让环境变量生效

 

 

 

 

[java] view plain copy

 

1. [hadoop@hadoopTest hadoop-2.7.2]$ source /etc/profile  

7、自检hadoop checknative –a 指令检查

 

 

 

 

[java] view plain copy

 

1. <pre name="code" class="java">[hadoop@hadoopTest hadoop-2.7.2]$ hadoop checknative –a