hadoop全家桶系列1-zookeeper

Posted 2023-02-27

参考技术A 启动ZK服务: sh bin/zkServer.sh start
查看ZK服务状态: sh bin/zkServer.sh status
停止ZK服务: sh bin/zkServer.sh stop
重启ZK服务: sh bin/zkServer.sh restart

显示根目录下、文件： ls / 使用 ls 命令来查看当前 ZooKeeper 中所包含的内容
显示根目录下、文件： ls2 / 查看当前节点数据并能看到更新次数等数据
创建文件，并设置初始内容： create /zk "test" 创建一个新的 znode节点“ zk ”以及与它关联的字符串
获取文件内容： get /zk 确认 znode 是否包含我们所创建的字符串
修改文件内容： set /zk "zkbak" 对 zk 所关联的字符串进行设置
删除文件： delete /zk 将刚才创建的 znode 删除
退出客户端： quit
帮助命令： help

执行hdfs zkfc -formatZK 初始化HA的zookeeper信息
hadoop namenode -format
在nn1上执行hadoop-daemon.sh start namenode
在nn2上执行hadoop namenode -bootstrapStandby 同步
在nn2上执行 hadoop-daemon.sh start namenode
在nn1和nn2分别启动hadoop-daemon.sh start zkfc,这时两个一个变成active,一个变成standby
hdfs haadmin -getServiceState 可查看HA状态

注意HA不能切换是因为nn1和nn2的没有安装fuser
在nn1和nn2上执行yum -y install psmisc

改变文件副本数 setrep
hadoop fs -setrep -R -w 2 /test.txt
-R 递归改变目录下所有文件的副本数。
-w 等待副本数调整完毕后返回。可理解为加了这个参数就是阻塞式的了。
hadoop dfsadmin
例如：hadoop dfsadmin -report
dfsadmin命令详解
-report：查看文件系统的基本信息和统计信息。
-safemode <enter | leave | get | wait>：安全模式命令。安全模式是NameNode的一种状态，在这种状态下，NameNode不接受对名字空间的更改（只读）；不复制或删除块。NameNode在启动时自动进入安全模式，当配置块的最小百分数满足最小副本数的条件时，会自动离开安全模式。enter是进入，leave是离开。