Linux三剑客-sed

Posted 不甘平凡,叶育生

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了Linux三剑客-sed相关的知识,希望对你有一定的参考价值。

sed对文本的处理很强大,并且sed非常小,参数少,容易掌握,他的操作方式根awk有点像。sed按顺序逐行读取文件。然后,它执行为该行指定的所有操作,并在完成请求的修改之后的内容显示出来,也可以存放到文件中。完成了一行上的所有操作之后,它读取文件的下一行,然后重复该过程直到它完成该文件。在这里要注意一点,源文件(默认地)保持不被修改。sed 默认读取整个文件并对其中的每一行进行修改。说白了就是一行一行的操作。我用sed主要就是用里面的替换功能,真的很强大。下面以实例,详细的说一下,先从替换开始,最常用的。

参数:

技术分享图片
技术分享图片
 1 sed -h
 2  -n, --quiet, --silent    取消自动打印模式空间
 3  -e 脚本, --expression=脚本   添加“脚本”到程序的运行列表
 4  -f 脚本文件, --file=脚本文件  添加“脚本文件”到程序的运行列表
 5  --follow-symlinks    直接修改文件时跟随软链接
 6  -i[扩展名], --in-place[=扩展名]    直接修改文件(如果指定扩展名就备份文件)
 7  -l N, --line-length=N   指定“l”命令的换行期望长度
 8  --posix  关闭所有 GNU 扩展
 9  -r, --regexp-extended  在脚本中使用扩展正则表达式
10  -s, --separate  将输入文件视为各个独立的文件而不是一个长的连续输入
11  -u, --unbuffered  从输入文件读取最少的数据,更频繁的刷新输出
12  --help     打印帮助并退出
13  --version  输出版本信息并退出
技术分享图片
技术分享图片

实例练习:

测试文件如:

 

技术分享图片
技术分享图片
 1 root:x:0:0:root:/root:/bin/bash
 2 bin:x:1:1:bin:/bin:/bin/false
 3 daemon:x:2:2:daemon:/sbin:/bin/false
 4 mail:x:8:12:mail:/var/spool/mail:/bin/false
 5 ftp:x:14:11:ftp:/home/ftp:/bin/false
 6 &nobody:$:99:99:nobody:/:/bin/false
 7 zhangy:x:1000:100:,,,:/home/zhangy:/bin/bash
 8 http:x:33:33::/srv/http:/bin/false
 9 dbus:x:81:81:System message bus:/:/bin/false
10 hal:x:82:82:HAL daemon:/:/bin/false
11 mysql:x:89:89::/var/lib/mysql:/bin/false
12 aaa:x:1001:1001::/home/aaa:/bin/bash
13 ba:x:1002:1002::/home/zhangy:/bin/bash
14 test:x:1003:1003::/home/test:/bin/bash
15 @zhangying:*:1004:1004::/home/test:/bin/bash
16 policykit:x:102:1005:Po
技术分享图片
技术分享图片

 

一:把test文件中的root替换成tankzhang

1 # sed ‘s/root/tankzhang/‘ test

二:用tankzhang把文件test中的root全部替换掉,请注意g这个字母

1 # sed ‘s/root/tankzhang/g‘ test |grep zhang
2  tankzhang:x:0:0:tankzhang:/tankzhang:/bin/bash
3  zhangy:x:1000:100:,,,:/home/zhangy:/bin/bash
4  ba:x:1002:1002::/home/zhangy:/bin/bash
5  @zhangying:*:1004:1004::/home/test:/bin/bash

三:加了-n p后表示只打印那些发生替换的行(部分替换),上面的例子,我并没有加上grep

1 # sed -n ‘s/root/tankzhang/p‘ test
2  tankzhang:x:0:0:root:/root:/bin/bash

四:,在第二行,到第八行之间,替换以zhang开头的行,用ying来替换,并显示替换的行

1 # cat test | sed -ne ‘2,8s/^zhang/ying/gp‘
2  yingy:x:1000:100:,,,:/home/zhangy:/bin/bash

五:当有多个命令要执行时,可以用分号来分开,并且分隔符可以自定义,默认是/。上面的例子意思是在第二行,到第八行之间,替换以zhang开头的行,用ying来替换,在5,到10间,用goodbay来替换dbus,并显示替换的行

1 # cat test | sed -n  ‘2,8s/^zhang/ying/gp;5,10s#dbus#goodbay#gp‘
2  yingy:x:1000:100:,,,:/home/zhangy:/bin/bash
3  goodbay:x:81:81:System message bus:/:/bin/false

六:,行替换,用匹配root的行,来替换匹配zhangy的行

技术分享图片
技术分享图片
 1 $ sed -e ‘/root/h‘ -e ‘/zhangy/g‘ test
 2  root:x:0:0:root:/root:/bin/bash
 3  bin:x:1:1:bin:/bin:/bin/false
 4  daemon:x:2:2:daemon:/sbin:/bin/false
 5  mail:x:8:12:mail:/var/spool/mail:/bin/false
 6  ftp:x:14:11:ftp:/home/ftp:/bin/false
 7  &nobody:$:99:99:nobody:/:/bin/false
 8  root:x:0:0:root:/root:/bin/bash
 9  http:x:33:33::/srv/http:/bin/false
10  dbus:x:81:81:System message bus:/:/bin/false
11  hal:x:82:82:HAL daemon:/:/bin/false
12  mysql:x:89:89::/var/lib/mysql:/bin/false
13  aaa:x:1001:1001::/home/aaa:/bin/bash
14  root:x:0:0:root:/root:/bin/bash
15  test:x:1003:1003::/home/test:/bin/bash
16  root:x:0:0:root:/root:/bin/bash
技术分享图片
技术分享图片

注意:特殊匹配

技术分享图片
技术分享图片
 1 匹配数字别忘了中括号外面还有一个中括号。
 2 [:alnum:] 字母数字 [a-z A-Z 0-9]
 3 [:alpha:] 字母 [a-z A-Z]
 4 [:blank:] 空格或制表键
 5 [:cntrl:] 任何控制字符
 6 [:digit:] 数字 [0-9]
 7 [:graph:] 任何可视字符(无空格)
 8 [:lower:] 小写 [a-z]
 9 [:print:] 非控制字符
10 [:punct:] 标点字符
11 [:space:] 空格
12 [:upper:] 大写 [A-Z]
13 [:xdigit:] 十六进制数字 [0-9 a-f A-F]
技术分享图片
技术分享图片

例a,删除1,14行

1 $ sed -e ‘1,14d‘ test
2  @zhangying:*:1004:1004::/home/test:/bin/bash
3  policykit:x:102:1005:Po

例b,删除4以后的行,包括第4行,把$当成最大行数就行了。

1 $ sed -e ‘4,$d‘ test
2  root:x:0:0:root:/root:/bin/bash
3  bin:x:1:1:bin:/bin:/bin/false
4  daemon:x:2:2:daemon:/sbin:/bin/false

例c,删除包括false的行,或者包括bash的行,别忘了加\

1 $ sed -e ‘/\(false\|bash\)$/d‘ test
2  policykit:x:102:1005:Po

例d,删除从匹配root的行,到匹配以test开头的行,中间的行

1 $ sed -e ‘/root/,/^test/d‘ test
2  @zhangying:*:1004:1004::/home/test:/bin/bash
3  policykit:x:102:1005:Po

以上是关于Linux三剑客-sed的主要内容,如果未能解决你的问题,请参考以下文章

Linux三剑客——sed命令简述

linux文本三剑客之sed命令详解

Linux三剑客——sed

linux三剑客之sed入门详解

Linux三剑客-sed批量编辑文本

linux三剑客-sed