浅谈sed用法

Posted 2020-07-12

原理

     一行文本被读到模式空间以后，首先会判断模式空间的行是否能被你定义的模式所匹配到，如果能匹配到就对它做一次输出操作，而后做编辑操作，如果不期望直接输出模式空间的内容到屏幕可以加-n选项

    文本处理三剑客：

grep, egrep, fgrep：文本过滤器

sed：Stream EDitor，流编辑器，行

awk：文本格式化工具，报告生成器

sed [OPTION]...  ‘script‘  file1 ...

script：

地址定界编辑命令

常用选项：

-n：不输出模式空间中的内容至屏幕；

-e script, --expression=script：多点编辑；

-f  /PATH/TO/SED_SCRIPT_FILE :每行一个编辑命令；

-r, --regexp-extended：支持使用扩展正则表达式；

-i[SUFFIX], --in-place[=SUFFIX]：直接编辑原文件 ；

~]# sed  -e  ‘[email protected]^#[[:space:]]*@@‘   -e  ‘/^UUID/d‘  /etc/fstab

地址定界：

(1) 空地址：对全文进行处理；

(2) 单地址：

#：指定行；

/pattern/：被此模式所匹配到的每一行；

(3) 地址范围

#,#：从第#行到第#行

       #,+#：从第三行开始向下八行

  #，/pat1/：从第#行开始，到第一次匹配到模式结束

      /pat1/,/pat2/：从匹配到第一个模式开始，到匹配到第二个模式结束

  $：最后一行；

(4) 步进：~

1~2：所有奇数行

2~2：所有偶数行

编辑命令：

d：删除:(显示未被匹配到的行)

                例：sed ‘1,3d‘ /etc/fstab 显示第四行到最后一行的所有内容 

p：显示模式空间中的内容；(带来的结果是匹配到的行显示两次，-n可以静默显示，只显示一遍)

                例：sed ‘1,4p‘ /etc/fstab 显示整个文本，并且1到4行显示两遍

a  \text：在匹配到的行后面追加文本“text”，支持使用\n实现多行追加； 

i  \text：在匹配到的行前面插入文本“text”，支持使用\n实现多行插入；

              例：sed ‘3i \new line‘ /etc/fstab 在第三行前面插入一个新行 

                  sed ‘3a \new line \n another line‘ /etc/fstab 在第三行后面添加两行分别是newline、anotherline     

                  sed ‘/^UUID/a \# add new device base on UUID ‘ /etc/fstab 在每一个UUID行后加一个注释行。

             注意：a i 后面注意反斜线的存在 固定模式.

c  \text：把匹配到的行替换为指定的文本“text”；

              例：sed ‘1,3c \test‘ /etc/fstab

        w /PATH/TO/SOMEFILE：保存模式空间匹配到的行至指定的文件中；

              例：sed -n ‘/^[^#]/w /tmp/fstab.new‘ /etc/fstab 把所有非#开头的行保存至fstab.new文件中，并且在屏幕上只输出一遍

 

r  /PATH/FROM/SOMEFILE：读取指定文件的内容至当前文件被模式匹配到的行后面；文件合并；

              例：sed ‘3r /etc/issue‘ /etc/fstab 保存issue全文至fstab的第三行后面

=：为模式匹配到的行打印行号；

              例：sed ‘/^UUID/=‘ /etc/fstab 将被你条件所必配的行的下一行加个行号，比较诡异

!：条件取反；

              例：sed ‘/^#/id‘  将所有以#开头的行取反

替换标记：

        s///：查找替换，其分隔符可自行指定，常用的有[email protected]@@, s###等；

g：全局替换；

w /PATH/TO/SOMEFILE：将替换成功的结果保存至指定文件中；

p：显示替换成功的行；

练习1：删除/boot/grub/grub2.cfg文件中所有以空白字符开头的行的行首的所有空白字符；

~]# sed  ‘[email protected]^[[:space:]]\[email protected]@‘ /etc/grub2.cfg

练习2：删除/etc/fstab文件中所有以#开头的行的行首的#号及#后面的所有空白字符；

~]# sed  ‘[email protected]^#[[:space:]]*@@‘  /etc/fstab

练习3：输出一个绝对路径给sed命令，取出其目录，其行为类似于dirname；

~]# echo "/var/log/messages/" | sed ‘[email protected][^/]\+/\[email protected]@‘  卯定路径

            注释：行尾的非斜线字符，至少出现一次，后面可以跟一个或零个斜线；将这些替换为空

~]# echo "/var/log/messages" | sed -r ‘[email protected][^/]+/[email protected]@‘ 

            注释：同上，使用了正则表达式

            

高级编辑命令：

h：把模式空间中的内容覆盖至保持空间中；

H：把模式空间中的内容追加至保持空间中；

g：把保持空间中的内容覆盖至模式空间中；

G：把保持空间中的内容追加至模式空间中；

x：把模式空间中的内容与保持空间中的内容互换；

n：覆盖读取匹配到的行的下一行至模式空间中；

N：追加读取匹配到的行的下一行至模式空间中；

d：删除模式空间中的行；

D：删除多行模式空间中的所有行；

    示例：

sed  -n  ‘n;p‘  FILE：显示偶数行；

sed  ‘1!G;h;$!d‘  FILE：逆序显示文件的内容；

                注释：如果是第一行我们就不做G操作，如果是最后一行我们

sed  ’$!d‘  FILE：取出最后一行；

                注释：不是最后一行就删除

sed  ‘$!N;$!D‘ FILE：取出文件后两行；

                注释：不是最后一行就N；不是最后一行就D

sed ‘/^$/d;G‘ FILE：删除原有的所有空白行，而后为所有的非空白行后添加一个空白行；

sed  ‘n;d‘  FILE：显示奇数行；

sed ‘G‘ FILE：在原有的每行后方添加一个空白行；

本文出自 “我动了谁的奶酪” 博客，请务必保留此出处http://wscto.blog.51cto.com/11249394/1782819