可以灵活扩容的分布式文件存储软件有吗?

Posted

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了可以灵活扩容的分布式文件存储软件有吗?相关的知识,希望对你有一定的参考价值。

没有扩容软件,只可以扩容硬件存储器。【感兴趣的话点击此处,免费了解一下】

管理服务(管理节点的计算服务器,对外提供管理接口)、DHCP服务(为计算服务器的网络启动分配管理网段的IP)、tftp 服务(为计算服务器的网络启动提供远程启动映象)、nbd 服务(为计算服务器提供网络块设备服务)。管理服务器上还会运行一个数据采集程序,他定时将各种性能数据采集下来并发送到中央的数据采集服务器上存储服务器群:存储服务器可以是ISCSI或内置存储容量比较大的x86服务器,通过 集群文件系统组成一个统一的存储池,为节点内的虚拟机提供逻辑磁盘存储、非结构数据存储以及整合备份服务。

深圳市亿万克数据设备科技有限公司是研祥高科技控股集团旗下的全资子公司。研祥集团作为中国企业500强,持续运营30年。研祥集团全球49个分支机构,三个国家级创新平台,一直致力于技术创新引领行业发展。拥有1100多项授权专利,1300项非专利核心技术。
参考技术A XSKY 星辰天合的XEDP平台扩展弹性就很高的,在我们使用中发现,它可以实现从单资源池数台到数百台的不停机水平扩展。本回答被提问者采纳 参考技术B 没有扩容软件!
只可以扩容硬件存储器!!
参考技术C Lustre是一个大规模的、安全可靠的,具备高可用性的集群文件系统,它是由SUN公司开发和维护的。该项目主要的目的就是开发下一代的集群文件系统,可以支持超过10000个节点,数以PB的数据量存储系统。目前Lustre已经运用在一些领域,例如HP SFS产品等。
5、 MooseFS
MooseFS是一款相对小众的分布式文件系统,不需要修改上层应用接口即可直接使用,支持FUSE的操作方式,部署简单并提供Web界面的方式进行管理与监控,同其他分布式操作系统一样,支持在线扩容,并进行横向扩展。MooseFS还具有可找回误操作删除的文件,相当于一个回收站,方便业务进行定制;同时MooseFS对于海量小文件的读写要比大文件读写的效率高的多。
但MooseFS的缺点同样明显,MFS的主备架构情况类似于mysql的主从复制,从可以扩展,主却不容易扩展。短期的对策就是按照业务来做切分,随着MFS体系架构中存储文件的总数上升,Master Server对内存的需求量会不断增大。并且对于其单点问题官方自带的是把数据信息从Master Server同步到Metalogger Server上,Master Server一旦出问题Metalogger Server可以恢复升级为Master Server,但是需要恢复时间。目前,也可以通过第三方的高可用方案(heartbeat+drbd+moosefs)来解决 Master Server 的单点问题。
6、MogileFS
由memcahed的开发公司danga一款perl开发的产品,目前国内使用mogielFS的有图片托管网站yupoo等。MogileFS是一套高效的文件自动备份组件,由Six Apart开发,广泛应用在包括LiveJournal等web2.0站点上。
7. FastDFS
是一款类似Google FS的开源分布式文件系统,是纯C语言开发的。FastDFS是一个开源的轻量级分布式文件系统,它对文件进行管理,功能包括:文件存储、文件同步、文件访问(文件上传、文件下

Linux磁盘和文件系统扩容彻底研究

1.物理卷:

LVM 逻辑卷的底层物理存储单元是一个块设备,比如一个分区或整个磁盘。要在 LVM 逻辑卷中使用该设备,则必须将该设备初始化为物理卷(PV)。

2.卷组:
物理卷合并为卷组(VG)。这样就创建了磁盘空间池,并可使用它分配逻辑卷。

3.逻辑卷:
逻辑卷管理会根据物理存储生成提取层,以便创建逻辑存储卷。这样就比直接使用物理存储在很多方面提供了更大的灵活性。使用逻辑卷时不会受物理磁盘大小限制。另外,软件无法看到硬件存储配置,因此可在不停止应用程序或者卸载文件系统的情况下,重新定义大小并进行移动。这样可降低操作成本。

4.他们三者的关系:
Linux 操作系统中某个文件挂载点对应着逻辑卷。
一个逻辑卷从属一个卷组,可以使用卷组的物理空间。
举例说明:
如果当前系统的root 节点挂载的是 /dev/mapper/centos_-root ,对应的逻辑卷是/dev/centos_/root
逻辑卷大小是10G,那么某天root节点磁盘空间不足了,扩容步骤如下:
a.增加磁盘。
b.对磁盘分区,形成物理卷。
c.将该物理卷加入到/dev/centos_/root 所属的卷组: centos_
d.卷组有了富余空间,那么可以按照需要分配空间给某个逻辑卷/dev/centos_/root

磁盘扩容详细步骤:
http://www.cnblogs.com/wajika/p/6513102.html

逻辑卷物理卷概念:
https://access.redhat.com/documentation/zh-cn/red_hat_enterprise_linux/7/html/logical_volume_manager_administration/logical_volumes


技术图片

 

技术图片

技术图片

 

以上是关于可以灵活扩容的分布式文件存储软件有吗?的主要内容,如果未能解决你的问题,请参考以下文章

FastDFS分布式文件系统

FastDFS分布式文件系统

FastDFS分布式文件系统

FastDFS分布式文件系统

FastDFS分布式文件系统

FastDFS分布式文件系统