Linux之使用MogileFS分布式文件系统并使用nginx实现反向代理

Posted

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了Linux之使用MogileFS分布式文件系统并使用nginx实现反向代理相关的知识,希望对你有一定的参考价值。

MogileFS是一套高效的文件自动备份组件,由Six Apart开发,广泛应用在包括LiveJournal等web2.0站点上。 
MogileFS的特性: 
工作在应用层,无单点,自动文件复制(复制的最小单位是class,而不是文件),传输中立且使用nfs或者http协议进行传输。 
MogileFS的结构组成: 
技术分享
tracker:是mogilefs的核心,是一个调度器,通过数据库来保存元信息,包括daemon,class,host等信息,主要职责:监控后端mogstore节点,并指示store节点完成数据的添加,删除,查询,及节点之间的复制. 
mogstore:实际数据的存储位置,通常伪一个http服务器. 
database:用来保存节点的全局信息.

1.安装MogileFS 
a.下载MogileFS 
MogileFS-Server:https://github.com/mogilefs/MogileFS-Server 
MogileFS-Utils:https://github.com/mogilefs/MogileFS-Utils 
perl-MogileFS-Client:https://github.com/mogilefs/perl-MogileFS-Client 
b.安装: 
将文件解压并进入文件内

    [[email protected] nginx-1.11.12]# make Makefile.PL
    [[email protected] nginx-1.11.12]# make && make install
    [[email protected] nginx-1.11.12]# yum install perl-IO-AIO123123

2.配置文件讲解

    

参数解答:
  

总用量 8

3.启动并测试

1.创建/var/run/mogilefsd目录并修改属组属主
    [[email protected] mogilefs]# mkdir -p  /var/run/mogilefsd
           [[email protected] mogilefs]# chown -R mogilefs.mogilefs /var/run/mogilefsd/
2.创建/mog/mogdata目录并修改属组属主
    [[email protected] mogilefs]# mkdir -p /mog/mogdata
    [[email protected] mogilefs]# chown -R mogilefs.mogilefs /mog/mogdata/
3.启动mogilefsd进程和mogstored进程
    [[email protected] mogilefs]# service mogilefsd start
        Starting mogilefsd                                         
    [[email protected] mogilefs]# service mogstored start
        Starting mogstored                                         
**此处的启动脚本是使用rpm包安装,并且自带的,一般使用make安装的没有服务脚本**

4.使用管理工具配置mogstord节点主机

   

   

    

   

         **文件实际访问位置**

5.使用浏览器访问 
技术分享
这样一个mogilefs分布式存储就设置好了,只是mogilefsd进程和mogstored进程在统一主机上。 
6.负载均衡设计结构 
技术分享
7.使用nginx实,现反向代理 
使用nginx反向代理mogilefs时,要用到第三方模块在能使实现代理,nginx身不支持mogilefs的代理,下载模块快为nginx_mogilefs_module,下载地址:http://www.grid.net.ru/nginx/download/nginx_mogilefs_module-1.0.4.tar.gz

    
    **详细参数请参考官方文档:http://www.grid.net.ru/nginx/mogilefs.en.html**

8.配置两台mogilefs主机 
在配置两台主机是,mogilefsd进程会在数据库中读取mogstord节点的信息,在配置时按照上述阐述仅可以配置,建议在一个mogilefsd节点上配置,另一个节点可以在数据库中读到。 
9.测试结果 
技术分享


本文出自 “lnsaneLlinux” 博客,请务必保留此出处http://lnsane784.blog.51cto.com/1226518/1930436

以上是关于Linux之使用MogileFS分布式文件系统并使用nginx实现反向代理的主要内容,如果未能解决你的问题,请参考以下文章

共享存储之分布式文件系统应用及MogileFS基础应用

分布式存储之MogileFS简单应用

分布式存储之MogileFS基于Nginx实现负载均衡(Nginx+MogileFS)

新手必读:Linux分布式存储之——Mogilefs

分布式文件系统MogileFS

Linux基础之文件系统简介及其系统管理工具