hdfs集群默认权限

Posted 2023-04-20

参考技术A 权限与linux的权限设计一致，修改权限，移除权限都是常规操作。主要是创建目录，文件的默认权限。
hdfs创建的目录权限由umask、父目录权限决定

hadoop的umask 与linux的umask类似，umask-mode值为022，默认为创建文件夹为755对应rwxr-xr-x，文件为644对应rw-r--r--
针对上述问题，设置为000则为777

根据hadoop集群版本，如果是3.x 以前只能通过client的 umask决定，无法通过父目继承

hdfs dfs 命令参考链接

默认继承父目录权限

CDH之HDFS用户权限问题

文章目录

• 问题1
• • 解决方法
• 问题2
• • 解决方法

问题1

root用户操作HDFS时报错：
mkdir: Permission denied: user=root, access=WRITE, inode="/":hdfs:supergroup:drwxr-xr-x
是因为CDH默认开启了检查HDFS权限

解决方法

• 关闭检查HDFS权限可以解决报错，但降低了HDFS的安全性
  对此的更优解是：把用户添加到supergroup组
  下面以root用户为例：

• 在所有节点执行下述命令

# 添加supergroup组
groupadd supergroup
# root用户加入supergroup组
usermod -a -G supergroup root
# 同步系统的权限信息到HDFS
sudo -u hdfs hdfs dfsadmin -refreshUserToGroupsMappings

• 检验

hadoop fs -mkdir /temp
hadoop fs -ls /

问题2

创建文件夹使用了相对路径时，出现No such file or directory

是因为没有对应的用户目录

解决方法

user下创建用户目录

hadoop fs -mkdir /user/root

创建后，相对路径会在用户目录中