sed

Posted

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了sed相关的知识,希望对你有一定的参考价值。

sed命令:行编辑器;
默认不是直接编辑原文件,而是先把原文件复制一份,在内存中执行编译操作.
假如有一个文件,上面有多行文本数据,sed从该文件中一次先读出一行,它不会修改原文件的那一行,只是先复制出来,然后把这一行放在自己的工作车间内(pattern space),首先先判断一下该行是否是其要匹配的行,如果是则先进行编辑处理(edit)经过处理以后,其结果将会被送入到标准输出(stdout),如果不是其要匹配的行,则默认直接送到标准输出(stdout),我们也可以隐藏,可以设置不是要匹配的行,不用标准输出,是匹配的行,直接编辑显示
地址定界编辑命令
 常用选项:
 -n:不输出模式空间中的内容至屏幕;
 -e script, --expression=script:多点编辑;
 -f  /PATH/TO/SED_SCRIPT_FILE
 每行一个编辑命令;
 -r, --regexp-extended:支持使用扩展正则表达式;
 -i[SUFFIX], --in-place[=SUFFIX]:直接编辑原文件 ;
 ~]# sed  -e  ‘[email protected]^#[[:space:]]*@@‘   -e  ‘/^UUID/d‘  /etc/fstab  
地址定界:
 (1)(不给地址) 空地址:对全文进行处理;
 (2) 单地址:
    #:指定行;
        /pattern/:被此模式所匹配到的每一行;
 (3) 地址范围
        #,#:比如从第1行到第1行
        #,+#:不如3,+8从第3行开始向下8行,包括第3行一共9行
         # ,/pat1/: 表示从指定的行开始一直到第一次能被模式所匹配到的行结束之间的所有行
            /pat1/,/pat2/:表示从第一次被模式所匹配到的行到第2次被模式所匹配到的行之间的所有行
    $:最后一行;
   (4) 步进:~
    1~2:所有奇数行
    2~2:所有偶数行
    
编辑命令:
      d:删除;注意该命令是一个比较特殊的操作。该命令把整行都给删除了,所以是无法输出的。
[[email protected] ~]# cp /etc/fstab /tmp/lilu
cp: overwrite `/tmp/lilu‘? y
[[email protected] ~]# cat /tmp/lilu


#
# /etc/fstab
# Created by anaconda on Sun May  8 14:27:02 2016
#
# Accessible filesystems, by reference, are maintained under ‘/dev/disk‘
# See man pages fstab(5), findfs(8), mount(8) and/or blkid(8) for more info
#
UUID=2327d6c1-d73d-4037-aa9b-493c9b868b0a /                       ext4    defaults        1 1
UUID=e22e484a-ae98-4559-929e-0a5515884469 /boot                   ext4    defaults        1 2
UUID=f5c34482-509d-44e5-a76c-5ad25f549de2 swap                    swap    defaults        0 0
tmpfs                   /dev/shm                tmpfs   defaults        0 0
devpts                  /dev/pts                devpts  gid=5,mode=620  0 0
sysfs                   /sys                    sysfs   defaults        0 0
proc                    /proc                   proc    defaults        0 0
LABEL=MYDATA            /mydata                 ext2    defaults,acl    0
[[email protected] ~]# sed ‘1,5d‘ /tmp/lilu
# Accessible filesystems, by reference, are maintained under ‘/dev/disk‘
# See man pages fstab(5), findfs(8), mount(8) and/or blkid(8) for more info
#
UUID=2327d6c1-d73d-4037-aa9b-493c9b868b0a /                       ext4    defaults        1 1
UUID=e22e484a-ae98-4559-929e-0a5515884469 /boot                   ext4    defaults        1 2
UUID=f5c34482-509d-44e5-a76c-5ad25f549de2 swap                    swap    defaults        0 0
tmpfs                   /dev/shm                tmpfs   defaults        0 0
devpts                  /dev/pts                devpts  gid=5,mode=620  0 0
sysfs                   /sys                    sysfs   defaults        0 0
proc                    /proc                   proc    defaults        0 0
LABEL=MYDATA            /mydata                 ext2    defaults,acl    0    
由上可见:第1行至第5行完全被删除,所以前五行没有数据输出,所输出的全是第6行开始以后的行。
加入-n选项后:则禁止,默认没有模式匹配到时则直接输出的行为
[[email protected] ~]# sed  -n ‘1,5d‘ /tmp/lilu
[[email protected] ~]#
因为这次模式匹配到后面跟的是删除,所以就什么也没有输出,如果后面跟的是替换则将替换后的值输出:


[[email protected] ~]# sed ‘1~2d‘ /etc/fstab
#
# Created by anaconda on Sun May  8 14:27:02 2016
# Accessible filesystems, by reference, are maintained under ‘/dev/disk‘
#
UUID=e22e484a-ae98-4559-929e-0a5515884469 /boot                   ext4    defaults        1 2
该命令的意思是显示偶行:因为‘1~2d‘的含义是删除奇数行,所以显示的是偶数行
p:显示匹配到的模式空间中的内容;
[[email protected] ~]# sed ‘1~2p‘ /etc/fstab



#
# /etc/fstab
# /etc/fstab
# Created by anaconda on Sun May  8 14:27:02 2016
#
#
# Accessible filesystems, by reference, are maintained under ‘/dev/disk‘
# See man pages fstab(5), findfs(8), mount(8) and/or blkid(8) for more info
# See man pages fstab(5), findfs(8), mount(8) and/or blkid(8) for more info
#
UUID=2327d6c1-d73d-4037-aa9b-493c9b868b0a /                       ext4    defaults        1 1
UUID=2327d6c1-d73d-4037-aa9b-493c9b868b0a /                       ext4    defaults        1 1
由此可见使用p选项后,显示的是该奇数行,并且显示了2次!这是因为默认被匹配到的行显示,然后后面跟的编辑选项是p,根据其含义所以又显示了一遍因此一个显示了2次!
若如果只想其显示一次则需要跟上面的一样,在前面加一个-n,禁止掉默认输出!
a  \text:在行后面追加文本“text”,支持使用反斜线\n实现多行追加;
i  \text:在行前面插入文本“text”,支持使用反斜线\n实现多行插入;
[[email protected] ~]# cat /tmp/lilu


#
# /etc/fstab
# Created by anaconda on Sun May  8 14:27:02 2016
#
# Accessible filesystems, by reference, are maintained under ‘/dev/disk‘
# See man pages fstab(5), findfs(8), mount(8) and/or blkid(8) for more in
[[email protected] ~]# sed ‘3i \new line‘ /tmp/lilu


#
new line
# /etc/fstab
# Created by anaconda on Sun May  8 14:27:02 2016
#
# Accessible filesystems, by reference, are maintained under ‘/dev/disk‘
# See man pages fstab(5), findfs(8), mount(8) and/or blkid(8) for more in
使用i后可见第在第3行插入了new line 原来的第3行变为了第4行。
使用a后如下:
[[email protected] ~]# sed ‘1a \new line‘ /tmp/lilu


new line
#
# /etc/fstab
# Created by anaconda on Sun May  8 14:27:02 2016
也可以使用\n来转行进行多行输出:
[[email protected] ~]# sed ‘1a \new line\n哈哈 哦哈哈哈‘ /tmp/lilu


new line
哈哈 哦哈哈哈
#
# /etc/fstab
# Created by anaconda on Sun May  8 14:27:02 2016


c  \text:把匹配到的行替换为此处指定的文本“text”;
[[email protected] ~]# sed ‘1c\哈哈 哦哈哈哈‘ /tmp/lilu
哈哈 哦哈哈哈
#
# /etc/fstab
# Created by anaconda on Sun May  8 14:27:02 2016
由此可见被匹配到第第一行被替换成了哈哈 哦哈哈哈
w /PATH/TO/SOMEFILE:保存模式空间匹配到的行至指定的文件中;
练习:将/tmp/lilu 所有非#号开头的行全部匹配到/tmp/fstab,new文件中
[[email protected] ~]# sed ‘/^[^#]/w /tmp/fstab.new‘ /tmp/lilu
#
# /etc/fstab
# Created by anaconda on Sun May  8 14:27:02 2016
#
# Accessible filesystems, by reference, are maintained under ‘/dev/disk‘
# See man pages fstab(5), findfs(8), mount(8) and/or blkid(8) for more info
#
UUID=2327d6c1-d73d-4037-aa9b-493c9b868b0a /                       ext4    defaults        1 1
UUID=e22e484a-ae98-4559-929e-0a5515884469 /boot                   ext4    defaults        1 2
UUID=f5c34482-509d-44e5-a76c-5ad25f549de2 swap                    swap    defaults        0 0
tmpfs                   /dev/shm                tmpfs   defaults        0 0
devpts                  /dev/pts                devpts  gid=5,mode=620  0 0
sysfs                   /sys                    sysfs   defaults        0 0
proc                    /proc                   proc    defaults        0 0
LABEL=MYDATA            /mydata                 ext2    defaults,acl    0 0
[[email protected] ~]# cat /tmp/fstab.niu
cat: /tmp/fstab.niu: No such file or directory
[[email protected] ~]# cat /tmp/fstab.new
UUID=2327d6c1-d73d-4037-aa9b-493c9b868b0a /                       ext4    defaults        1 1
UUID=e22e484a-ae98-4559-929e-0a5515884469 /boot                   ext4    defaults        1 2
UUID=f5c34482-509d-44e5-a76c-5ad25f549de2 swap                    swap    defaults        0 0
tmpfs                   /dev/shm                tmpfs   defaults        0 0
devpts                  /dev/pts                devpts  gid=5,mode=620  0 0
sysfs                   /sys                    sysfs   defaults        0 0
proc                    /proc                   proc    defaults        0 0
LABEL=MYDATA            /mydata                 ext2    defaults,acl    0 0


r  /PATH/FROM/SOMEFILE:读取指定文件的内容至当前文件被模式匹配到的行后面;文件合并;
[[email protected] ~]# cat /etc/issue
CentOS release 6.7 (Final)
Kernel \r on an \m


[[email protected] ~]# sed ‘3r /tmp/lilu‘ /etc/issue
CentOS release 6.7 (Final)
Kernel \r on an \m



#
# /etc/fstab
# Created by anaconda on Sun May  8 14:27:02 2016
#
# Accessible filesystems, by reference, are maintained under ‘/dev/disk‘
# See man pages fstab(5), findfs(8), mount(8) and/or blkid(8) for more info
#
UUID=2327d6c1-d73d-4037-aa9b-493c9b868b0a /                       ext4    defaults        1 1


=:为模式匹配到的行打印行号;
[[email protected] ~]# sed ‘/UUID/=‘ /tmp/lilu
#
9
UUID=2327d6c1-d73d-4037-aa9b-493c9b868b0a /                       ext4    defaults        1 1
10
UUID=e22e484a-ae98-4559-929e-0a5515884469 /boot                   ext4    defaults        1 2
11
UUID=f5c34482-509d-44e5-a76c-5ad25f549de2 swap                    swap    defa
!:条件取反;
删除/tmp/lilu中所有以非#号开头的行
[[email protected] ~]# sed ‘/^#/!d‘ /tmp/lilu
#
# /etc/fstab
# Created by anaconda on Sun May  8 14:27:02 2016
#
# Accessible filesystems, by reference, are maintained under ‘/dev/disk‘
# See man pages fstab(5), findfs(8), mount(8) and/or blkid(8) for more inf
格式:地址定界!编辑命令;
s///:查找替换,其分隔符可自行指定,常用的有[email protected]@@, s###等;
替换标记:
g:全局替换;
w /PATH/TO/SOMEFILE:将替换成功的结果保存至指定文件中;
p:显示替换成功的行;
    
练习1:删除/etc/grub2.cfg文件中所有以空白字符开头的行的行首的所有空白字符;
~]# sed  ‘[email protected]^[[:space:]]\[email protected]@‘ /etc/grub2.cfg
因为是对全文匹配所有不需要给地址。
练习2:删除/etc/fstab文件中所有以#开头的行的行首的#号及#后面的所有空白字符;
~]# sed  ‘[email protected]^#[[:space:]]*@@‘  /etc/fstab
练习3:输出一个绝对路径给sed命令,取出其目录,其行为类似于dirname;
~]# echo "/var/log/messages/" | sed ‘[email protected][^/]\+/\[email protected]@‘
~]# echo "/var/log/messages" | sed -r ‘[email protected][^/]+/[email protected]@‘
     
高级编辑命令:
h:把模式空间中的内容覆盖至保持空间中;
H:把模式空间中的内容追加至保持空间中;
g:把保持空间中的内容覆盖至模式空间中;
G:把保持空间中的内容追加至模式空间中;
x:把模式空间中的内容与保持空间中的内容互换;
n:覆盖读取匹配到的行的下一行至模式空间中;
N:追加读取匹配到的行的下一行至模式空间中;
d:删除模式空间中的行;
D:删除多行模式空间中的所有行;
   
示例:
sed  -n  ‘n;p‘  FILE:显示偶数行;
sed  ‘1!G;h;$!d‘  FILE:逆序显示文件的内容;
sed  ’$!d‘  FILE:取出最后一行;
sed  ‘$!N;$!D‘ FILE:取出文件后两行;
sed ‘/^$/d;G‘ FILE:删除原有的所有空白行,而后为所有的非空白行后添加一个空白行;
sed  ‘n;d‘  FILE:显示奇数行;
sed ‘G‘ FILE:在原有的每行后方添加一个空白行;


本文出自 “11303170” 博客,请务必保留此出处http://11313170.blog.51cto.com/11303170/1782787

以上是关于sed的主要内容,如果未能解决你的问题,请参考以下文章

Sed教程之Sed语法

sed和awk之sed篇(含sed高级用法)

sed 在指定行插入?

sed的增删改查sed常见问题

sed打印指定范围

sed删除怎么生效