什么是NameNode和DataNode?他们是如何协同工作的?

Posted haima1949

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了什么是NameNode和DataNode?他们是如何协同工作的?相关的知识,希望对你有一定的参考价值。

[学习笔记]

什么是NameNode和DataNode?他们是如何协同工作的? 马克-to-win @ 马克java社区:一个HDFS集群包含一个NameNode和若干的DataNode(start-dfs命令就启动了NameNode和DataNode), NameNode是管理者,主要负责管理hdfs文件系统,具体包括namespace命名空间管理(即目录结构)和block管理。DataNode主 要用来存储数据文件,因为文件可能巨大无比(大数据,大于1TB),HDFS将一个文件分割成一个个的block,这些block可能存储在一个DataNode上或 者多个DataNode上。DataNode负责实际的底层的文件的读写。马克-to-win @ 马克java社区:举个例子:如果客户端client程序发起了读hdfs上的某个文件的指令, NameNode首先将找到这个文件对应的block,然后NameNode告知client,这些block数据在哪些DataNode上,之后, client将直接和DataNode交互。

文章转载自原文:https://blog.csdn.net/mark_to_win/article/details/90240724

以上是关于什么是NameNode和DataNode?他们是如何协同工作的?的主要内容,如果未能解决你的问题,请参考以下文章

04 namenode和datanode

Hadoop 从 namenode 和 datanode 文件恢复

namenode和datanode机制

hadoop中NAMENODE和DATANODE的大小

Hadoop Datanode、namenode、secondary-namenode、job-tracker 和 task-tracker

datanode与namenode的通信