文本三剑客之sed用法详解

Posted 2020-08-15

sed命令简介：

sed是stream editor的缩写，一种流编辑器，它一次处理一行内容。处理时，把当前处理的行存储在临时缓冲区中，称为“模式空间”（pattern space），接着用sed命令处理缓冲区中的内容，处理完成后，把缓冲区的内容送往屏幕。接着处理下一行，这样不断重复，直到文件末尾。文件内容并没有改变，除非你使用重定向存储输出。sed主要用来自动编辑一个或多个文件，简化对文件的反复操作，编写转换程序等。

sed的命令格式：

sed [OPTION]...  ‘script‘      [input-file] 

      选项   地址定界 编辑命令    编辑文件

常用选项：

    -n：不输出模式空间中的内容至屏幕；

     -e script, --expression=script：多点编辑；

     -f  /PATH/TO/SED_SCRIPT_FILE：将要执行的操作写在脚本里

          每行一个编辑命令；

     -r, --regexp-extended：支持使用扩展正则表达式；

     -i[SUFFIX], --in-place[=SUFFIX]：直接编辑原文件 ；

使用实例：

[[email protected] ~]# sed -n ‘/root/p‘ /etc/passwd    
#匹配到含root字符的行，并显示出来，如果不加-n选项，含有root的行会显示并且在显示一遍全文
[[email protected] ~]# sed  -e  ‘[email protected]^#[[:space:]]*@@‘   -e  ‘/^UUID/d‘  /etc/fstab
#将以#和其后空白字符开始的行去掉，并删除以UUID开始的行

地址定界：

     (1) 空地址：对全文进行处理；

     (2) 单地址：

     #：指定行；

     /pattern/：被此模式所匹配到的每一行；

     (3) 地址范围

     #,#：从#行到#行

     #,+#：从#行到+#行

     #，/pat1/

     /pat1/,/pat2/

     $：最后一行；

     (4) 步进：~

     1~2：所有奇数行

     2~2：所有偶数行

使用实例：

[[email protected] ~]# sed -n ‘2p‘ /etc/fstab    #显示第二行
[[email protected] ~]# sed -n ‘/root/p‘ /etc/passwd    #查找到含有root的行并显示出来
[[email protected] ~]# sed -n ‘1,3p‘ /etc/passwd    #显示1到3行
[[email protected] ~]# sed -n ‘1,+1p‘ /etc/passwd    #显示第一行到从第一行情+1行

编辑命令：

    d：删除；

     p：显示模式空间中的内容；

     a  \text：在行后面追加文本“text”，支持使用\n实现多行追加； 

     i  \text：在行前面插入文本“text”，支持使用\n实现多行插入； 

     c  \text：把匹配到的行替换为此处指定的文本“text”；

     w /PATH/TO/SOMEFILE：保存模式空间匹配到的行至指定的文件中；

     r  /PATH/FROM/SOMEFILE：读取指定文件的内容至当前文件被模式匹配到的行后面；文件合并；

     =：为模式匹配到的行打印行号；

     !：条件取反；

     地址定界!编辑命令；

     s///：查找替换，其分隔符可自行指定，常用的有[email protected]@@, s###等；

     替换标记：

     g：全局替换；

     w /PATH/TO/SOMEFILE：将替换成功的结果保存至指定文件中；

     p：显示替换成功的行；

说明：此处匹配要用到正则表达式，关于正则表达式的介绍见：http://afterdawn.blog.51cto.com/7503144/1855128

使用实例：

[[email protected] ~]# sed  -n ‘/root/a/administrator‘ /etc/passwd
#在匹配含有root行的前面加一行为administrator
[[email protected] ~]# sed  -n ‘/root/c/administrator‘ /etc/passwd
#将含有root的行换为administrator
[[email protected] ~]# sed -n ‘s/root/administrator/gp‘ /etc/passwd
#将所有的root都替换成administrator

练习1：删除/boot/grub/grub2.cfg文件中所有以空白字符开头的行的行首的所有空白字符；

sed  ‘[email protected]^[[:space:]]\[email protected]@‘ /etc/grub2.cfg

练习2：删除/etc/fstab文件中所有以#开头的行的行首的#号及#后面的所有空白字符；

sed  ‘[email protected]^#[[:space:]]*@@‘  /etc/fstab

练习3：输出一个绝对路径给sed命令，取出其目录，其行为类似于dirname；

echo "/var/log/messages/" | sed ‘[email protected][^/]\+/\[email protected]@‘

echo "/var/log/messages" | sed -r ‘[email protected][^/]+/[email protected]@‘

高级编辑命令：

h：把模式空间中的内容覆盖至保持空间中；

H：把模式空间中的内容追加至保持空间中；

g：把保持空间中的内容覆盖至模式空间中；

G：把保持空间中的内容追加至模式空间中；

x：把模式空间中的内容与保持空间中的内容互换；

n：覆盖读取匹配到的行的下一行至模式空间中；

N：追加读取匹配到的行的下一行至模式空间中；

d：删除模式空间中的行；

D：删除多行模式空间中的所有行；

示例：

sed  -n  ‘n;p‘  FILE：显示偶数行；
sed  ‘1!G;h;$!d‘  FILE：逆序显示文件的内容；
sed  ’$!d‘  FILE：取出最后一行；
sed  ‘$!N;$!D‘ FILE：取出文件后两行；
sed ‘/^$/d;G‘ FILE：删除原有的所有空白行，而后为所有的非空白行后添加一个空白行；
sed  ‘n;d‘  FILE：显示奇数行；
sed ‘G‘ FILE：在原有的每行后方添加一个空白行；

本文出自 “汪立明” 博客，谢绝转载！