MFS分布式文件系统部署

Posted 2020-11-03

分布式文件系统是指文件系统管理的物理存储资源通过计算机网络与各节点相连。简单将，就是把一些分散的共享文件夹，集合到一个文件夹内。对于用户来说，只需要打开该虚拟文件夹，就可以使用这些分散的文件夹进行数据读写。分布式文件系统的好处在于集中访问、简化操作、冗余防灾、读写迅速。
MFS：是一个具有容错性的网络分布式文件系统，由元数据服务器master、元数据日志服务器metalogger、数据存储服务器chunk server和客户端client四个组件组成。如图，chunk seerver可以存在多个，可以及时添加，为MFS扩展容量。

MFS读取数据的过程：
·首先客户端向master发送请求
·master把所需的数据存放位置告诉给客户端（chunk server的ip地址和chunk编号）
·客户端向chunk server发送请求数据
·chunk server给客户端发送所需的数据
MFS写数据的过程：
·客户端想master发送请求
·master与chunk server进行交互，但是master只对某些chunk server创建新的分块chunks，创建成功后chunk server会给master反馈
·master告诉客户端，在上一过程指定的chunk server写入数据
·客户端开始写入数据
·写入数据的chunk server将这些数据与其他的chunk server进行同步，同步完成反馈结果给客户端。客户端再反馈给master，这时，整个过程结束。

搭建MFS案例
整个案例需要一台master、一台metalogger、一个客户机和两台chunk server（生产环境中，chunk会有更多）

Master上操作：


MetaLogger上操作：
安装部分（yum -y install zlib-devel）

mfsmetalogger.cfg配置


Chunk Server上的操作：

mfschunkserver.cfg配置

mfshhd.cfg配置


另一台Chunk配置地址为192.168.1.4
Client客户端上的操作：

执行mfsmount挂载

登陆mfs监控http：192.168.1.1:9425