系统架构经典漫画讲解HDFS原理

Posted 码农有道

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了系统架构经典漫画讲解HDFS原理相关的知识,希望对你有一定的参考价值。

链接:http://blog.chinaunix.net/uid-27105712-id-3274395.html

码农有道

 



分布式文件系统比较出名的有HDFS 和 GFS,其中HDFS比较简单一点。本文是一篇描述非常简洁易懂的漫画形式讲解HDFS的原理。比一般PPT要通俗易懂很多。难得的学习资料。

1、三个部分: 客户端、nameserver(可理解为主控和文件索引类似linux的inode)、datanode(存放实际数据的存server)

2、如何写数据过程

【系统架构】经典漫画讲解HDFS原理

【系统架构】经典漫画讲解HDFS原理

【系统架构】经典漫画讲解HDFS原理

【系统架构】经典漫画讲解HDFS原理

3、读取数据过程

【系统架构】经典漫画讲解HDFS原理

4、容错:第一部分:故障类型及其检测方法(nodeserver 故障,和网络故障,和脏数据问题)

【系统架构】经典漫画讲解HDFS原理

【系统架构】经典漫画讲解HDFS原理

5、容错第二部分:读写容错

【系统架构】经典漫画讲解HDFS原理

6、容错第三部分:dataNode 失效

【系统架构】经典漫画讲解HDFS原理

7、备份规则

【系统架构】经典漫画讲解HDFS原理

8、结束语

推荐阅读:




专注服务器后台技术栈知识总结分享

欢迎关注交流共同进步

码农有道 coding


码农有道,为您提供通俗易懂的技术文章,让技术变的更简单!

以上是关于系统架构经典漫画讲解HDFS原理的主要内容,如果未能解决你的问题,请参考以下文章

【HDFS】超详细讲解Erasure Coding-- EC架构及图解相关核心代码。

HDFS原理解析(总体架构,读写操作流程)

HDFS架构与原理浅析

大数据开发认知--架构

HDFS 分布式文件系统

2.7 HDFS的使用