配置NFS作为HDFS高可用的共享存储系统

Posted cqdxwjd

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了配置NFS作为HDFS高可用的共享存储系统相关的知识,希望对你有一定的参考价值。

所有命令或步骤:

首先,在各个节点上安装nfs服务

  yum install -y nfs

  service rpcbind start

  service nfs start

编辑/etc/exports文件,添加下面一行

  /mnt/share hadoop1(rw,no_root_squash,async) hadoop2(rw,no_root_squash,async) hadoop6(rw,no_root_squash,async) hadoop7(rw,no_root_squash,async)

  表示后面四台主机对共享目录/mnt/share具有读写权限.

  在hdfs-site.xml中添加下面几行

  

     <property>
                <name>dfs.namenode.shared.edits.dir.ns1</name>
                <value>file:///root/softs/hadoop-2.7.3/sharelogs/eidts_ns1</value>
        </property>
        <property>
                <name>dfs.namenode.shared.edits.dir.ns2</name>
                <value>file:///root/softs/hadoop-2.7.3/sharelogs/eidts_ns2</value>
        </property>

  在需要使用共享目录的节点上挂载共享目录

  mount -t nfs hadoop1:/mnt/share sharelogs/

  mount -t nfs hadoop2:/mnt/share sharelogs/

  mount -t nfs hadoop6:/mnt/share sharelogs/

  mount -t nfs hadoop7:/mnt/share sharelogs/

其他具体配置参照hadoop官方文档

以上是关于配置NFS作为HDFS高可用的共享存储系统的主要内容,如果未能解决你的问题,请参考以下文章

HDFS 高可用 使用Quorum Journal Manager (QJM)

drbd+nfs+heartbeat高可用

Linux 高可用(HA)集群基本概念详解

NFS--共享存储

Heartbeat+Haresources+NFS配置一个简单的HA高可用+资源共享集群

NFS共享存储服务部署