学习笔记-hadoop的安全模式和目录快照

Posted

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了学习笔记-hadoop的安全模式和目录快照相关的知识,希望对你有一定的参考价值。

安全模式

1、namenode启动时,合并image和edit成新的image,并产生新的edit log  

2、整个智能safe模式下,客户端只能读取

3、查看nameode是否位于安全模式

hdfs dfsadmin -safemode get    //查看安全模式

hdfs dfsadmin -safemode enter    //进入安全模式

hdfs dfsadmin -safemode leave    //离开安全模式

hdfs dfsadmin -safemode wait    //等待安全模式

4、手动保存名字空间:dfsadmin -saveNamespace


5、手动保存镜像文件:hdfs dfsadmin -fetchImage


6、保存元数据:(保存在hadoop_home下即:hadoop /logs/下)hdfs dfsadmin -metasave xxx.dsds


7、start-balancer.sh :启动均衡器,目的让集群数据存储上更加平均,提高整个集群的性能(一般我们在增加节


点的情况下才启动均衡器)

8、hadoop fs -count统计目录



--------------------------------------------------

Hadoop Snapshot快照:就是把当前的情况拍照保存起来。一般目录默认的情况是不能创建快照的。必须执行hdfs 


dfsadmin -allowSnapshot /user/ubuntu/data。允许创建快照,后面跟的是你想创建快照的地址路径。在这里允许


创建快照后我们就可以执行adoop fs -createSnapshot /user/ubuntu/data snap-1创建快照了。snap-1是你创建快


照名。查看快照的话直接hadoop fs -ls -R /user/ubuntu/data/.snapshot/。还有你在创建快照的情况下是不能禁


用快照的



1、创建快照hadoop fs [-createSnapshot <snapshotDir> [<snapshotName>]]


2、删除快照hadoop fs [-deleteSnapshot<snapshotDir> <oldName> <newName>]


3、重命名快照hadoop fs [-renameSnappshot<snapshotDir> <oldName> <newName>]


4、允许目录快照hadoop dfsadmin [-allowSnapshot <snapshotDir>]


5、禁用目录快照hadoop dfsamdin[-disallowSnapshot<snapshotDir>]


本文出自 “11009607” 博客,请务必保留此出处http://11019607.blog.51cto.com/11009607/1795861

以上是关于学习笔记-hadoop的安全模式和目录快照的主要内容,如果未能解决你的问题,请参考以下文章

学习笔记Hadoop—— Hadoop基础操作

2021年 全网最细大数据学习笔记:Hadoop 之 HDFS 进程详解

大数据讲课笔记3.2 Hadoop部署模式

学习笔记Hadoop—— Hadoop集群的安装与部署—— Hadoop集群部署模式配置固定IP

学习笔记Hadoop—— Hadoop集群的安装与部署

Hadoop学习笔记