hadoop伪分布式 datanode数据存放在哪儿

Posted 2023-05-13

伪分布式的话，应该是在slave上。集群中的datanode，一般是一个节点一个，负责管理它所在的节点上的存储。

datanode是负责处理文件系统客户端的读写请求的，是在namenode的统一调度下进行工作。namenode是中心服务器，属于master。

关于master、slave，可以在hadoop/..../conf/ 中的master和slave中通过 vi进行编辑配置。 参考技术A 默认安装不修改hdfs-site.xml的话，保存在/tmp下 参考技术B 本机上

Hadoop2.7.5伪分布式datanode不能启动

格式化namenode，start-dfs.sh之后输入jps指令，可以看到SecondaryNmaeNode,JPS,NameNode,但是看不到datanode。进文件夹里发现datanode对应的文件夹是空的，而Namenode对应的文件夹里有生成current文件夹，文件夹里有一些文件，secondarynamenode里面也有，这是什么问题，我的hdfs-site.xml文件配置应该是对的

参考技术A 在 /usr/local/hadoop/ 下面启动，找到是/opt/Hadoop/下面的hadoop安装包，是不是HADOOP_HOME环境变量配置的有问题。