配置NFS作为HDFS高可用的共享存储系统
Posted cqdxwjd
tags:
篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了配置NFS作为HDFS高可用的共享存储系统相关的知识,希望对你有一定的参考价值。
所有命令或步骤:
首先,在各个节点上安装nfs服务
yum install -y nfs
service rpcbind start
service nfs start
编辑/etc/exports文件,添加下面一行
/mnt/share hadoop1(rw,no_root_squash,async) hadoop2(rw,no_root_squash,async) hadoop6(rw,no_root_squash,async) hadoop7(rw,no_root_squash,async)
表示后面四台主机对共享目录/mnt/share具有读写权限.
在hdfs-site.xml中添加下面几行
<property> <name>dfs.namenode.shared.edits.dir.ns1</name> <value>file:///root/softs/hadoop-2.7.3/sharelogs/eidts_ns1</value> </property> <property> <name>dfs.namenode.shared.edits.dir.ns2</name> <value>file:///root/softs/hadoop-2.7.3/sharelogs/eidts_ns2</value> </property>
在需要使用共享目录的节点上挂载共享目录
mount -t nfs hadoop1:/mnt/share sharelogs/
mount -t nfs hadoop2:/mnt/share sharelogs/
mount -t nfs hadoop6:/mnt/share sharelogs/
mount -t nfs hadoop7:/mnt/share sharelogs/
其他具体配置参照hadoop官方文档
以上是关于配置NFS作为HDFS高可用的共享存储系统的主要内容,如果未能解决你的问题,请参考以下文章
HDFS 高可用 使用Quorum Journal Manager (QJM)