HDFS2.0之简单总结

Posted wadeyu

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了HDFS2.0之简单总结相关的知识,希望对你有一定的参考价值。

新特性

  • NameNode支持HA
  • 命名空间支持分区(Federation)
  • 支持ViewFS
  • 支持目录快照
  • 支持权限ACL
  • 支持缓存指定的文件

QJM实现名字节点HA

技术分享图片
(图片来源互联网)

命名空间分区(NameNode Federation)

文件系统命名空间进行分组,每组由一个NameNode集群负责管理和维护,各个NameNode集群独立,各自维护自己的block pool。由客户端选择通过访问哪个NameNode集群,由客户端控制文件系统的命名空间分组,客户端可以借助ViewFS来实现逻辑上看起来是同一个命名空间。DataNode节点共享。

技术分享图片
(图片来源互联网)

参考资料

【0】HDFS Users Guide
https://hadoop.apache.org/docs/r2.6.5/hadoop-project-dist/hadoop-hdfs/HdfsUserGuide.html

【1】HDFS精华文章汇总
https://blog.csdn.net/Androidlushangderen/article/details/78700392

【2】hadoop(二):hdfs HA原理及安装
http://www.cnblogs.com/tgzhu/p/5790565.html

【3】hadoop2.x HDFS快照介绍
https://blog.csdn.net/Amber_amber/article/details/47021841

以上是关于HDFS2.0之简单总结的主要内容,如果未能解决你的问题,请参考以下文章

初识Mysql之基本简单语法总结

Python函数之简单总结

对设计模式的总结之简单工厂与策略模式

Lucene简单总结

jQuery 的选择器可谓之强大无比,这里简单地总结一下常用的元素查找方法

ES6之async的常用简单总结