手动修复 under-replicated blocks in HDFS

Posted yfb918

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了手动修复 under-replicated blocks in HDFS相关的知识,希望对你有一定的参考价值。

解决方式步骤:
1、进入hdfs的pod
kubectl get pod -o wide | grep hdfs
kubectl exec -ti hadoop-hdfs-namenode-hdfs1-948569108-c5d70 bash 
2、获取票据
kinit -kt /etc/hdfs1/conf/hdfs.keytab hdfs/gz232-112
3、查询每个blocks信息
hdfs fsck -blocks -files -locations /
技术图片
4、找出replication != 3 的blocks
hdfs fsck / | grep ‘Under replicated‘
5、cat /tmp/under_replicated_files  查看,是不是所有的都是这个问题
6、手动修复 under_replicated_files
su - <$hdfs_user>
hdfs fsck / | grep ‘Under replicated‘ | awk -F‘:‘ ‘{print $1}‘ >> /tmp/under_replicated_files
for hdfsfile in `cat /tmp/under_replicated_files`; do echo "Fixing $hdfsfile :" ;  hadoop fs -setrep 3 $hdfsfile; done

以上是关于手动修复 under-replicated blocks in HDFS的主要内容,如果未能解决你的问题,请参考以下文章

手动修复IAT

怎么手动修复以下漏洞啊?

Hacker(20)----手动修复Windows系统漏洞

Android热修复手动实现

Android热修复手动实现

一步步手动实现热修复-dex文件的生成与加载