分布式文件系统比较出名的有HDFS? 和 GFS

Posted 2020-09-27 lord_is_layuping

分布式文件系统比较出名的有HDFS  和 GFS，其中HDFS比较简单一点。本文是一篇描述非常简洁易懂的漫画形式讲解HDFS的原理。比一般PPT要通俗易懂很多。不难得的学习资料。

1、三个部分: 客户端、nameserver（可理解为主控和文件索引,类似Linux的inode）、datanode（存放实际数据）

 

在这里，client的形式我所了解的有两种，通过Hadoop提供的api所编写的程序可以和hdfs进行交互，另外一种就是安装了hadoop的datanode其也可以通过命令行与hdfs系统进行交互，如在datanode上上传则使用如下命令行：bin/hadoop fs -put example1 user/chunk/

2、如何写数据过程

 

 

3、读取数据过程

--------------------------------

1.翻译经典 HDFS 原理讲解漫画 之二----读数据和容错 - hudiefenmu的专栏 - CSDN博客

http://blog.csdn.net/hudiefenmu/article/details/37694503

== 以上 2017/7/8 下午12:40:15

4、容错：第一部分：故障类型及其检测方法（nodeserver 故障，和网络故障，和脏数据问题）

5、容错第二部分：读写容错

--------------------------------

1.翻译经典 HDFS 原理讲解漫画 之三---容错和副本布局策略 - hudiefenmu的专栏 - CSDN博客

http://blog.csdn.net/hudiefenmu/article/details/37820789

== 以上 2017/7/8 下午12:41:57

6、容错第三部分：dataNode 失效

7、备份规则

8、结束语

来源： http://blog.csdn.net/hipilee/article/details/7855612

参考：

--------------------------------

1.【转】【漫画解读】HDFS存储原理 - Bodi - 博客园

http://www.cnblogs.com/raphael5200/p/5497218.html

== 以上 2017/7/8 下午12:44:07