Linux之文本处理工具

Posted

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了Linux之文本处理工具相关的知识,希望对你有一定的参考价值。

一、定义一个对所有用户都生效的命令别名,例如:lftps=‘lftp 172.168.0.1/pub’
#使用管理员账户root(仅管理员账户可以管理全局配置文件)在/etc/bashrc下定义全局配置文件。

    [[email protected] ~]#echo "lftaps=’lftp 172.16.0.1/pub’" >>/etc/bashrc
    [[email protected] ~]# . /etc/bashrc

    注意:source:在当前bash环境下读取并执行FileName中的命令
               .:打开一个子shell来读取并执行FileName中命令
               bash:在当前bash环境下读取并执行FileName中的命令

二、显示/etc/passwd文件中不以/bin/bash结尾的行`

    [[email protected] ~]# grep -v ‘/bin/bash‘ /etc/passwd

三、找出/etc/passwd文件中,包含两位数或者三位数的行

    [[email protected] ~]# grep -E ‘\<[0-9]2,3\>‘ /etc/passwd

四、显示/proc/meminfo文件中以大写或小写S开头的行;用三种方式实现

    #第一种方式
    [[email protected] ~]#grep ‘^[sS]‘ /proc/meminfo 
    #第二种方式
        [[email protected] ~]#grep -E ‘^(s|S)‘ /proc/meminfo 
    #第三种方式
        [[email protected] ~]#grep -i ‘^s‘ /proc/meminfo

五、使用echo输出一个绝对路径,使用egrep取出路径名,类型执行 dirname /etc/passwd的结果
#第一种方式
[[email protected] ~]#echo “/etc/sysconfig/network” | grep -Eo "./\<" /etc/sysconfig/
#第二种方式
[[email protected] ~]#echo "/etc/sysconfig/network" |sed -r ‘[email protected](^/.
/)([^/]+/?)@\[email protected]‘ /etc/sysconfig/

六、找出ifconfig中的ip地址,要求结果只显示IP地址

    #第一种方式
        [[email protected] ~]#ifconfig |grep -Eo "\<(([1-9]?[0-9]|1[0-9][0-9]|2[0-4][0-9]|25[0-5])\.)3([0-9]|[1-9][0-9]|1[0-9][0-9]|2[0-4][0-9]|25[0-5])\>"  
    #第二种方式
        [[email protected] ~]#ifconfig ens33 |sed -r ‘2!d;[email protected](.*inet )(.*)(  net.*)@\[email protected]

七、vim定制自动缩进四个字符

 在/etc/vimrc配置文件底部增加如下字符:
     set ts=4        #设置缩进4个字符

八、编写脚本,实现自动添加三个用户,并计算这三个用户的UID之和

    [[email protected] ~]# vim summation.sh
         #!/bin/bash
            useradd user1
            useradd user2
            useradd user3
        echo "$[$(id -u user1)+$(id -u user2)+$(id -u user3)]"
    [[email protected] ~]# bash summation.sh
        15045

九、find用法以及常用用法的实例演示。

Linux文件中查找文件是一件相当繁琐的事情,因为Linux系统中所有的文件可以以任何的后缀名进行命名,所以Linux中有许多工具用来进行查找文件,例如find命令。
find的命令是一种实时查找工具,通过遍历指定起始路径下的文件系统层级机构完成文件查找
工作特点:查找速度略慢,精确查找,实时查找。

find命令:

用法:
find [OPTIONS] [查找起始路径] [查找条件] 【处理动作】

        查找起始路径:指定具体搜索目标起始路径;默认为当前目录
        查找条件:指定的查找标准,可以根据文件名,大小,类型,属主,属组,权限等等标准进行,默认为找出指定路径下的所有文件
        处理动作:对符合查找条件的文件做出的操作,例如:删除等操作,默认为输出至标准输出。

查找条件:

    根据文件名查找:
         -name "pattern":
         -inmae "pattern":不区分大小写
         支持glob风格的通配符:*,?,【】,【^】
         示例:
        [[email protected] ~]# find . -name "*fstab*"
                     ./fstab
       #在当前目录下查找含有“fstab”字符串的文件

根据文件的从属关系查找:

    -user USERNAME:查找属主指定用户的所有文件
    -group GRPNAME:查找属组指定组的所有文件
    -uid UID:查找属主指定UID的所有文件
    -gid GID:查找属组指定GID的所有文件 
    -nouser:查找没有属主的文件 
    -nogroup:查找没有属组的文件
示例:
[[email protected] ~]# find /tmp -user ydong -ls
#查找tmp目录下属主为ydong的所有文件和目录

[[email protected] ~]# find ./ -group white -ls
206703397   4 -rw-r--r--   1 ydong    white   541 2月 22 11:57 ./fstab
#查找当前文件目录下属组为white的所有文件和目录

[[email protected] ~]# find /tmp -uid 1000 -ls
#在tmp目录下查找属主UID号为1000的所有文件和目录

[[email protected] ~]# find ./ -gid 5015
#在当前路径下查找属组GID号为5015的所有文件和目录

[[email protected] ~]# find /etc -nouser -ls
137888778    0 -rw-r--r--   1 5010   5011   0 2月22 22:22 /etc/test2
137888780    0 -rw-r--r--   1 5010   5011   0 2月22 22:22 /etc/test3
#查找etc目录下没有属主的所有文件和目录

[[email protected] ~]# find /etc -nogroup -ls
137888693    0 -rw-r--r--   1 white  5014   0 2月22 22:22 /etc/test1
#查找etc目录下没有属组的所有文件和目录

根据文件的类型查找:

-type TYPE: 
            TYPE
              ↓ 
            f:普通文件
            d: 目录文件
            l:符号链接文件
            b:块设备文件
            c:字符设备文件
            p:管道文件
            s:套接字文件
示例:
   [[email protected] ~]# find /dev -type l -ls
   #查找dev目录下所有符号链接文件

   [[email protected] ~]# find /dev -type b 
   /dev/dm-2
   /dev/dm-1
   #查找dev目录下所有块设备文件

组合测试:

 与:-a,默认组合逻辑;
 或:-o ,只要符合二者其一         
 摩根定律:
      !A -a !B=!(A -o B)  
      !A -o !B=!(A -a B) 
 示例:
    [[email protected] ~]# find /tmp/test -not -user root -a -not -name "*fstab*" -ls
    68957951  0 -rw-r--r--   1 white  blue   0 2月23 00:01 /tmp/test/test1
    68958014  0 -rw-r--r--   1 white  blue   0 2月23 00:01 /tmp/test/test2
    #查找/tmp/test下属主不是root,而且也不包含“fstab”字符串的文件

    第二种写法:
     [[email protected] ~]# find /tmp/test -not \( -user root -o -name "*fstab*" \)

根据文件的大小查找:

-size【+|-】#UNIT
  常用单位UNIT:k,M,G、
  范围区间:
   #UNIT:#-1<文件<=#    如: 6k 表示(5k,6k]
  -#UNIT:0<=文件<=#-1   如:-6k 表示[0,5]
  +#UNIT: #>文件<无穷大   如:+6k 表示(6,∞]
        示例:
    [[email protected] ~]# find /var -size +10M -exec ls -lh  \;
-rw-r--r--. 1 root root 72M 2月  22 12:09 /var/lib/rpm/Packages
-rw-r--r--. 1 root root 30M 11月 26 00:00 /var/cache/yum/x86_64/7/base/gen/primary_db.sqlite
...
#查找/var目录下大于10M的文件

根据时间戳查找:

以“天”为单位:
    -atime:支持【+|-】#
    -mtime:

     find   /usr   -mtime  -4   查找文件更新日时在距现在时刻4天以内的文件

     find   /usr  -mtime  +4    查找文件更新日时在距现在时刻5天以上的文件

     find   /usr   -mtime   4   查找文件更新日时在距现在时刻4天以上5天以内的文件

     -ctime           

以“分钟”为单位:

     -amin:
     -mmin:
     -cmin:
示例:
[[email protected] ~]# find /etc -mtime -4 -ls
137888693  0 -rw-r--r--   1 white  5014  02月22 22:22 /etc/test1
....
 [[email protected] ~]# stat /etc/test1
文件:"/etc/test1"
大小:0            块:0          IO 块:4096   普通空文件
设备:fd00h/64768d Inode:137888693   硬链接:1
权限:(0644/-rw-r--r--)  Uid:( 5014/   white)   Gid:( 5014/ UNKNOWN)
环境:unconfined_u:object_r:etc_t:s0
最近访问:2019-02-22 22:22:30.330480989 +0800
最近更改:2019-02-22 22:22:30.330480989 +0800
最近改动:2019-02-22 23:39:33.344090312 +0800
#查找/etc目录下4天以内修改过的文件

根据权限查找:

-perm【/|-】mode:
   mode:精确权限查找
  /mode:  任何一类用户(u,g,o)的权限中的任何一位(r,w,x)符合条件即满足
                       9位权限之间存在“或”关系
  -mode:每一类用户(u,g,o)的权限中的每一位(r,w,x)同时符合条件即满足
                      9位权限之间存在“与”关系
     示例:
   [[email protected] ~]# find ./ -perm -222 -ls
   #u,g,o三类用户都必须有写权限才能匹配

   [[email protected] ~]# find ./ -perm /222 -ls
   #u,g,o三类用户中只要有一位有写权限就能匹配

处理动作:

-print: 将查找的路径输出至标准输出。默认动作

-ls: 类似于对查找到的文件执行“ls -l”命令,输出文件的详细信息

-delete:删除查找到的文件,,

-fls /PATH/TO/SOMEFILE: 把查找到的所有文件的长格式信息保存至指定文件中

-ok COMMAND   \; (固定格式)  :对查找到的每个文件执行由COMMAND表示的命令,每次都由用户确认

-exec COMMAND  \;    :对查找到的每个文件执行由COMMAND表示的命令
示例:
    [[email protected] ~]# find ./ -name "test1" -ok rm -rf  \;
    < rm ... ./test1 > ? y
#匹配查找到test1文件之后进行删除操作,并向用户确认

[[email protected] ~]# find ./ -name "*test*" -fls ./hello.txt 
[[email protected] ~]# cat hello.txt 
206703362    0 -rw-r--r--   1 5011  5012     0   2月23 00:48 ./test2
206701816    4 -rwxr-xr-x   1 root  root     42  2月16 23:10 ./test3.sh
3401882      0 drwxr-xr-x   2 root  root     6   2月23 00:00 ./test

#把匹配查找到的含有“test”字符串的文件以长格式信息存储在hello文本中

以上是关于Linux之文本处理工具的主要内容,如果未能解决你的问题,请参考以下文章

Linux文本处理之 grep egrep

linux文本处理三剑客之grep

Linux文本处理三剑客之grep

Linux文本处理工具之grep

linux之文本处理工具awk

文本处理工具之grep