12.22- linux文件属性详解
Posted
tags:
篇首语：本文由小常识网(cha138.com)小编为大家整理，主要介绍了12.22- linux文件属性详解相关的知识，希望对你有一定的参考价值。
12.22
linux文件属性详解
内容:
1. inode和block特点与查看
2. 磁盘空间满了的三种常见故障类型排查与解决
3. 文件类型详解与查看
4. linux用户类型及相关文件
5. 服务器的连接与安全
6. 软链接与硬链接的区别,特点及创建
7. linux下彻底删除一个文件的原理与步骤
8. linux下三种时间介绍
第1章 整体说明
第2章 inode 与 block
2.1 inode: index node 索引节点 存放的是文件/目录属性信息，大小，时间，类型，权限， inode里面唯独不包含文件名本身。（文件的名字不是文件的属性）
2.2 block 块 文件的内容 数据存放的位置
2.3 inode 和block 特点
1. inode存放文件的属性，block的位置
2. 创建一个非空文件至少要占用一个inode和至少一个block
3. 在同一个分区中，如果两个文件的inode号码相同，这两个文件互为硬链接，硬链接相当于是文件
不同的入口
4. block是存放数据的空间
5. block大小4K，比较大的文件会占用多个block，比较小的文件（1K）剩余的空间无法使用
6. 磁盘读取数据是按block为单位读取的
7. 每读取一个block就会消耗一次磁盘I/O（input/output 磁盘读写）
2.4 怎么来的？
预备姿势：
大房子（硬盘）-->划分隔断（分区）-->装修（格式化）-->装修风格（文件系统类型）-->安装门窗（挂载）
inode 和block 是在格式化创建文件系统的时候诞生
2.5 查看文件内容与 inode 和block 的关系
用户→文件名→inode→block(文件内容)
2.6 怎么查看inode和block信息
2.6.1 查看inode
l ls -lhi /etc/hosts 查看某个文件inode号码
[[email protected] oldboy]# ls -lhi gao
total 12K
405094 -rw-r--r--. 1 root root 16 Dec 12 14:38 feng
390247 drwxr-xr-x. 2 root root 4.0K Dec 15 03:54 n
l df -i 查看系统中一共有多少inode数量
[[email protected] n]# df -i
Filesystem Inodes IUsed IFree IUse% Mounted on
/dev/sda3 593344 58618 534726 10% /
tmpfs 60748 1 60747 1% /dev/shm
/dev/sda1 51200 42 51158 1% /boot
2.6.2 block 磁盘容量
l ls -lhi /etc/hosts 查看某个文件大小
[[email protected] n]# ls -lhi /etc/hosts
260127 -rw-r--r--. 2 root root 177 May 20 2017 /etc/hosts
l df -h 查看磁盘空间使用情况
[[email protected] n]# df -h
Filesystem Size Used Avail Use% Mounted on
/dev/sda3 8.8G 1.7G 6.7G 20% /
tmpfs 238M 0 238M 0% /dev/shm
/dev/sda1 190M 40M 141M 22% /boot
软链接和硬连接的区别
2.7 【企业案例】磁盘空间满了，no space left on device（磁盘
空间不足）
创建测试环境
mkdir -p /app/logs
dd if=/dev/zero of=/dev/sdc bs=8K count=10 创建指定大小文件
ls -l /dev/sdc
mkfs.ext4 /dev/sdc 格式化并创建文件系统（ext4）
mount -o loop /dev/sdc /app/logs 挂载
2.7.1 block满了
dd if=/dev/zero of=/dev/sdc bs=8K count=10 模拟大文件
解决：删大文件，腾出空间
2.7.2 inode满了
touch {1..10} 模拟多个文件
解决：删小文件，腾出名额限制
2.8 企业案例：如果向磁盘写入提示如下错误：NO space left on device（磁盘空间不足），通过df -h查看磁盘空间，发现没满，请问可能的原因是什么？企业场景什么情况下会导致这个问题发生？
错误：inode用光了
原因：大量的小文件 ---定时任务书写错误导致
第3章 文件类型
扩展名 .log .txt .conf .avi 用来区分不同类型的文件
3.0.1 windows： 强制、严格通过扩展名识别不同类型文件
3.0.2 Linux： 扩展名方便我们人类区分不同文件类型
3.0.3 拓展名含义： .conf 配置文件
.sh 脚本（命令大礼包）
3.0.4 linux下面常见的文件类型
- （ls） f （file） 普通文件
d d 目录
l l 软链接 符号链接 快捷方式
3.0.5 普通文件详解
1. 纯文本文件 text /etc/hosts
2. 二进制文件（命令） /bin/ls
3. 数据文件(data) 压缩包
3.0.6 file 查看文件的类型
file /tmp/etc.tar.gz
第4章 linux用户基础内容
UID user id 用户id
GID group id 用户组id
4.0.1 linux用户分类
root 皇帝 UID==0
虚拟用户 傀儡 linxu下面每个程序、进程都需要一个对应的用户和组
无法登录系统 UID==1--499
普通用户 百姓 UID=500+ （6万多）
4.0.2 id 查看用户id和所属组 id oldboy
[[email protected] n]# id root
uid=0(root) gid=0(root) groups=0(root)
4.0.3 对于一个文件/用户来说，用户分为几种
/etc/hosts 主人 亲戚 陌生人
属主（所有者） 属组 其他区用户
[[email protected] n]# ls -l 6
-rw-r--r--. 1 root root 0 Dec 22 07:28 6
-普通文件 rw- 所有者 r--属组 r--其他用户
4.0.4 linux权限
r 读 4
w 写 2
x 可执行（命令 脚本） 1
- 没有权限
4.0.5 与用户相关的文件
/etc/passwd 存放用户的信息
/etc/shadow 存放用户密码
/etc/group 存放用户组信息
/etc/gshadow 存放用户组密码
4.0.6 /etc/passwd文件详解
centos6.9 默认shell /bin/bash
第5章 服务器的连接与安全
5.0.1 连接到服务器：
1. ip
2. 用户
3. 密码
4. 端口号22
5.0.2 保护服务器：
1. 修改远程连接端口号
2. 禁止root用户远程登录系统
第6章 软连接（soft link或symlink）与硬链接（hard link）
6.1 硬链接 ：
6.1.1 概念：
文件（超市）的入口 硬链接
文件（超市）的入口数量 硬链接数量
在同一个分区中，inode号相同的文件互为硬链接
6.1.2 ln 创建链接 默认创建硬
[[email protected] gao]# ln yun.txt yun.txt_hard
[[email protected] gao]# ls -lhi yun.txt*
390247 -rw-r--r--. 2 root root 0 Dec 22 08:24 yun.txt
390247 -rw-r--r--. 2 root root 0 Dec 22 08:24 yun.txt_hard
6.1.3 作用：防止文件误删除，，两个入口，存在一个即可
6.1.4 特点：
1. 硬链接与原文件在同一分区，inode相同
2. 硬链接不可跨文件系统创建
3. 删除原文件，硬链接可用
4.不能对目录创建硬链接
6.2 软链接： -s 默认权限 777
6.2.1 概念：
相当于windows的快捷方式
指向源文件
源文件丢失，软链接失效
6.2.2 ln -s 创建软链接
[[email protected] gao]# ln -s yun.txt yun.txt_soft
[[email protected] gao]# ls -lhi yun*
390247 -rw-r--r--. 2 root root 0 Dec 22 08:24 yun.txt
390247 -rw-r--r--. 2 root root 0 Dec 22 08:24 yun.txt_hard
405095 lrwxrwxrwx. 1 root root 7 Dec 22 08:29 yun.txt_soft -> yun.txt 指向源文件
6.2.3 特点：
1）软链接可跨文件系统建立
2）创建软链接尽量使用绝对路径（相对路径--源文件路径改变软链接不可用）
3）删除源文件，软链接失效
4）指向源文件，相当于windows的快捷方式
6.2.4 错误：创建软链接时使用相对路径，原文件移动位置，导致软链接不可用
6.2.5 结论：创建软链接用绝对路径
ln -s /oldboy/ett.txt ett.txt_soft
6.3 总结
1) 删除原文件，软连接不可用
2) 删除硬链接，都没有影响
3) 删除源文件和硬链接，相当于没有任何入口（硬链接数为0）
第7章 Linux下面一个文件被彻底删除的条件
1. 文件的硬链接数为0 rm
2. 进程调用数为0（谁还在使用这个文件） lsof
7.0.1 lsof |grep “secure” 查看被进程调用的文件（是否有进程正在使用被删除的文件）
7.0.2 企业案例： 磁盘空间满了，删除大文件，可磁盘空间并没有减小
分析：你把文件删除了（硬链接），但这个文件还有进程在使用，所以这个文件并没有被彻底删除，最终导致磁盘空间不足
就好像你只是把超市的大门封住了，但超市本身还在
解决步骤：
1.模拟环境
seq 500000 >>/var/log/messages
2.查看磁盘空间 df -h 逐层排查
[[email protected] /]# df -h 查看那个分区占空间大
Filesystem Size Used Avail Use% Mounted on
/dev/sda3 8.8G 6.3G 2.1G 75% /
tmpfs 238M 0 238M 0% /dev/shm
/dev/sda1 190M 40M 141M 22% /boot
3.[[email protected] /]# du -sh /var/* |grep "G" 进目录进一步排查哪个子目录/文件大
4.6G /var/log
[[email protected] /]# du -sh /var/log/* |grep "G"
4.6G /var/log/messages
4.删除文件 ---询问boss后删除
\rm /var/log/messages -f
检查：
5.查看磁盘空间
[[email protected] /]# df -h
Filesystem Size Used Avail Use% Mounted on
/dev/sda3 8.8G 6.3G 2.1G 75% /
tmpfs 238M 0 238M 0% /dev/shm
/dev/sda1 190M 40M 141M 22% /boot
磁盘空间并没有被释放 由此---有某个文件并没有被彻底删除
6.lsof |grep messages查看哪个进程在使用被删除的文件
[[email protected] /]# lsof |grep messages
rsyslogd 2491 root 1w REG 8,3 4888893610 141095 /var/log/messages (deleted)
标志（detele）这个文件没有被彻底删除（硬链接数为0，进程调用数不为0）
7.重启进程 /etc/init.d/rsyslog restart
再次检查
8.查看磁盘空间 df -h
[[email protected] /]# df -h
Filesystem Size Used Avail Use% Mounted on
/dev/sda3 8.8G 1.7G 6.7G 21% /
tmpfs 238M 0 238M 0% /dev/shm
/dev/sda1 190M 40M 141M 22% /boot
磁盘空间被释放
7.0.3 总结：
1.找出系统中硬链接数为0，进程调用数不为0的文件（没有被彻底删除的文件）
lsof |grep delete
2.排查哪个文件占地大 du - sh /* |grep “G”
[[email protected] /]# du -sh /*|grep "G"
du: cannot access `/proc/50234/task/50234/fd/4': No such file or directory
du: cannot access `/proc/50234/task/50234/fdinfo/4': No such file or directory
du: cannot access `/proc/50234/fd/4': No such file or directory
du: cannot access `/proc/50234/fdinfo/4': No such file or directory
1.1G /usr
4.7G /var
3.以后会学习各种软件/服务日志及命令
7.1 磁盘空间系列小结：
7.1.1 block满了 文件没有被彻底删除（硬链接为0，进程调用数不为0）
工作中 lsof |grep delete 排查
7.1.2 block满了 正常满了
df -h 哪里满了
du -sh /* 一层一层排查 具体哪个目录/文件
确认之后，询问boss是否 删除
7.1.3 inode用光了
某个目录下有大量的小文件
----定时任务错误
l 解决方法：找出系统中目录大小大于1M
[[email protected] oldboy]# ls -lhd xiaodong/
drwxr-xr-x. 2 root root 4.0K May 20 23:22 xiaodong/
[[email protected] oldboy]# du -sh xiaodong/
11M xiaodong/
目录本身大小和目录下文件数量有关，与文件大小无关
目录占地面积 -----文件越多，占地越大
touch {1..10000}.txt
[[email protected] oldboy]# ls -ldih xiaodong
394659 drwxr-xr-x. 2 root root 252K May 20 16:53 xiaodong
7.2 如何在linux中删除的大量的小文件
删除文件太多，删不了
[[email protected] xiaodong]# \rm -f *.txt
-bash: /bin/rm: Argument list too long
解决：
1）ls *.txt |xargs rm 删除大量文件
[[email protected] xiaodong]# ls *.txt|xargs rm
[[email protected] xiaodong]# ls
注：2）删上亿个文件 一点一点删 否则会卡
3）删除目录（删除之前记录好目录的权限和所有者）
7.3 如何在linux中创建大量小文件
错误：
[[email protected] xiaodong]# touch {1..400000}.txt
-bash: /bin/touch: Argument list too long
解决：
echo {1..500000}.txt |xargs touch 创建太多文件
第8章 linux 下面几种时间
8.1 文件被修改或被访问的时间
mtime modify time 【修改时间】文件/目录的修改时间。文件内容修改
ctime change time 【属性改变时间】文件/目录属性的改变时间，大小，硬链接数，权限，所有者，所属的组，类型
atime access time 【访问时间】文件/目录的访问时间，cat查看
8.2 stat 显示文件时间信息 stat /oldboy.txt
[[email protected] oldboy]# stat oldboy.txt
File: `oldboy.txt'
Size: 29 Blocks: 8 IO Block: 4096 regular file
Device: 803h/2051d Inode: 405110 Links: 1
Access: (0644/-rw-r--r--) Uid: ( 0/ root) Gid: ( 0/ root)
Access: 2017-12-22 03:11:51.662787272 +0800
Modify: 2017-05-20 06:27:29.100976131 +0800
Change: 2017-05-20 06:27:29.100976131 +0800
8.3 atime 短期内查看次数多只计入一次 （防止磁盘空间浪费）
第9章 总结：
1. 文件属性总体介绍
2. inode与block 怎么来的 啥意思 特点
3. 企业案例 磁盘空间不足 原因
4. 用户分类
5. /etc/passwd 每一列含义
6. linux权限
7. linux软链接与硬链接
第10章 注意
10.1 硬链接文件两个文件inode号相同 占用了几个两个inode，一个block
10.2 touch {1..100} 快速创建多个文件
10.3 mv 原地移动相当于重命名
10.4 文件夹和文件都消耗inode和block
以上是关于12.22- linux文件属性详解的主要内容，如果未能解决你的问题，请参考以下文章