三剑客之sed
Posted
tags:
篇首语：本文由小常识网(cha138.com)小编为大家整理，主要介绍了三剑客之sed相关的知识，希望对你有一定的参考价值。
参考技术A sed是一个非交互式文本编辑器，它可以对文本文件和标准输入进行编辑，标准输入可以来自键盘输入，文件重定向，字符串，变量，或者是管道的文本。并将其复制到缓冲区，然后读取命令行的命令，对此命令要求的行号进行编辑。用法 ：
sed共有三种用法：
①直接在命令行中使用
sed [选项] 'sed命令' 输入文件
②将sed命令写入脚本文件中，使用sed命令调用
sed [选项] -f sed脚本文件 输入文件
③将sed命令写入脚本文件中，并设置为可执行
./sed 脚本文件 输入文件
其中第③种的脚本文件中需要使用#!符号开头。
sed 常用的选项
-n：不打印所有的行到标准输出,只输出那些被命令影响到的行
-e：表示将下一个字符串解析为sed编辑命令，如果只有一个编辑命令，则-e可以省略
-f：表示正在调用sed脚本文件
-r：表示支持延伸型的正则表示法(默认只支持基础正则表示法)
-i：直接修改读取的文件内容，而不是通过屏幕输出。
sed 命令
sed命令通常由两部分组成。文本定位和sed编辑命令。
文本定位对文本的部分行进行抽取，编辑命令对抽取的行进行编辑。
sed 定位方式
sed提供了两种定位方式：
①通过行号，指定一行或者行号范围
②使用正则表达式
定位方式：
x：x为指定行号
x,y：指定从x到y的行号范围
/pattern/：查询包含模式的行
/pattern/pattern/：查询包含两个模式的行
x,/pattern/：从x行到patter模式匹配的行之间
x,y!：查询不包括x和y行号的行
sed 编辑命令
p：打印匹配行
=：打印文件行号
a：在定位行号之后追加文本信息
i：在定位行号之前插入文本信息
d：删除定位行
c：使用新文本替换文本行
s：使用替换模式替换相应模式
r：从另一个文件中读取文本
w：将文本写入到一个文件
y：变换字符
q：第一个模式匹配后退出
：在定位行执行命令组
n：读取下一个输入行，用下一个命令处理新的行
说了这么多，我们就先来体验一下：
[ fuwh@localhost 15:11 ~/stu ] $ nl test
1 first line
2 second line
3 li n e
4 what is this
[ fuwh@localhost 15:11 ~/stu ] $ sed '2d' test
first line
l i n e
what is this
这就是sed的一个基本使用方式。
sed '2d' test：2表示定位到第二行，d表示删除，test表示输入文件。
选项-n的用法
[ fuwh@localhost 16:22 ~/stu ] $ cat test
first line
second line
l i n e
what is this
[ fuwh@localhost 16:22 ~/stu ] $ sed -n '2,4p' test
second line
l i n e
what is this
[ fuwh@localhost 16:22 ~/stu ] $
除了使用-e选项外，还可以使用和；来实现相同的功能
[ fuwh@localhost 17:04 ~/stu ] $ cat test | sed -n '3,$' d;p
sed：-e 表达式 #1，字符 3：遗漏命令
-bash: p: commandnot found
[ fuwh@localhost 17:04 ~/stu ] $ cat test | sed -n '3,$d;p'
[ fuwh@localhost 17:05 ~/stu ] $ cat test | sed -n '3,$p;='
l i n e
3
what is this
4
[ fuwh@localhost 17:05 ~/stu ] $
选项-e的用法
[ fuwh@localhost 16:26 ~/stu ] $ cat test | sed -ne '2,/is/p' -e '2,/is/='
second line
2
l i n e
3
what is this
4
[ fuwh@localhost 16:27 ~/stu ] $
选项-f的用法
首先建立一个sed的脚本文件，内容如下，并赋予可执行的权限。
[ fuwh@localhost 16:45 ~/stu ] $ cat append.sed
#!/bin/sed -f
/this/a\
this is the firstappend line\
this is the secondappend line
[ fuwh@localhost 16:45 ~/stu ] $ cat test
first line
second line
l i n e
what is this
[ fuwh@localhost 16:47 ~/stu ] $ which sed
/bin/sed
[ fuwh@localhost 16:47 ~/stu ] $ ll
总用量8
-rw-rw-r--. 1 fuwh
fuwh 84 8月 11 16:45 append.sed
-rw-rw-r--. 1 fuwh
fuwh 44 8月 11 15:10 test
[ fuwh@localhost 16:47 ~/stu ] $ chmod u+x append.sed
[ fuwh@localhost 16:48 ~/stu ] $ ll
总用量8
-rwxrw-r--. 1 fuwh
fuwh 84 8月 11 16:45 append.sed
-rw-rw-r--. 1 fuwh
fuwh 44 8月 11 15:10 test
[ fuwh@localhost 16:52 ~/stu ] $ ./append.sed test
first line
second line
l i n e
what is this
this is the firstappend line
this is the secondappend line
[ fuwh@localhost 16:53 ~/stu ] $
替换命令s
替换命令，将匹配的文本替换成新的文本。命令格式如下：
s/被替换的字符串/新字符串/[替换选项]
替换选项和意思：
g：表示替换文本中所有出现的
p：与-n结合，只打印替换行
w 文件名：表示将输出重定向到一个文件
[ fuwh@localhost 17:33 ~/stu ] $ sed 's/line/row/g' test
first row
second row
l i n e
what is this
[ fuwh@localhost 17:35 ~/stu ] $
linux三剑客之sed入门详解
sed介绍
sed流编辑器（stream editor），在三剑客中排行老二，是一款简单的文本编辑语言。sed并不直接处理源文件，而是逐行读取源文件的内容到内存（称模式空间）中，然后在模式空间中使用sed命令处理，再打印模式空间处理后的内容到标准输出。
sed的能够实现的功能：增删改查、替换、过滤、取行。
sed文本处理原理图
sed命令的语法：
sed [选项] ‘AddressCommand [修饰符]’inputfile（输入文件）
sed命令语法各参数解释
实验环境
[[email protected] tmp]# cat userpasswd.txt
1 stu01
2 9cab8
3 stu02
4 28f37
5 stu03
6 cd4ef
7 stu04
8 221ec
9 stu05
10 f7a98
[[email protected] tmp]#选项
-n： 取消默认输出，不打印（输出）模式空间的内容
常与p连用，只打印符合条件的行（取消默认输出，但打印符合条件的行）
[[email protected] tmp]# sed -n ‘s#stu01#stu#g‘p userpasswd.txt
1 stu
[[email protected] tmp]# -i：直接修改源文件（谨慎使用，以免操作失误导致源文件损坏）
-e：多个操作同时进行
-r：使用扩展表达式
Address:地址范围
1、LineNumber：特定的行，指定第几行，即n；$：表示最后一行
[[email protected] tmp]# sed -n 2p userpasswd.txt
2 9cab8
[[email protected] tmp]#
[[email protected] tmp]# sed -n ‘$p‘ userpasswd.txt
10 f7a98
[[email protected] tmp]#2、Start,End：起始行,结束行，例如“2,5”，从第2行到第5行
[[email protected] tmp]# sed -n 2,5p userpasswd.txt
2 9cab8
3 stu02
4 28f37
5 stu03
[[email protected] tmp]#3、mode1,mode2：从第一次被模式1匹配的行开始，到第一次被模式2匹配的行结束
[[email protected] tmp]# sed -n ‘/stu02/,6p‘ userpasswd.txt
3 stu02
4 28f37
5 stu03
6 cd4ef
[[email protected] tmp]#4、StartLine,+n：从StartLine开始往后n行，例如：“5，+2”，从第5行开始往后2行，即从第5行到第7行
[[email protected] tmp]# sed -n 5,+2p userpasswd.txt
5 stu03
6 cd4ef
7 stu04
[roo[email protected] tmp]#5、/^root/：地址范围可以使用正则表达式，但必须要用符号“/ /”括起来，此处的含义是找出以root开头的行
[[email protected] tmp]# sed -n ‘/.*stu.*/p‘ userpasswd.txt
1 stu01
3 stu02
5 stu03
7 stu04
9 stu05
[[email protected] tmp]#Command: sed执行命令
1、d：删除符合条件的行
[[email protected] tmp]# sed 2,3d userpasswd.txt
1 stu01
4 28f37
5 stu03
6 cd4ef
7 stu04
8 221ec
9 stu05
10 f7a98
[[email protected] tmp]#2、p：打印符合条件的行（输出）
[[email protected] tmp]# sed -n 3,4p userpasswd.txt
3 stu02
4 28f37
[[email protected] tmp]#3、’a 内容’：在指定的行后面追加新的内容
[[email protected] tmp]# sed ‘2a 11 hello‘ userpasswd.txt
1 stu01
2 9cab8
11 hello
3 stu02
4 28f37
…4、’i 内容’：在指定的行前追加新的内容
[[email protected] tmp]# sed ‘2i 11 hello‘ userpasswd.txt
1 stu01
11 hello
2 9cab8
3 stu02
4 28f37
…5、r file：将指定的文件内容添加到符合条件的行后面
[[email protected] tmp]# cat test
who
[[email protected] tmp]# sed ‘2r /tmp/test‘ userpasswd.txt
1 stu01
2 9cab8
who
3 stu02
4 28f37
…6、w file：将符合条件的行的内容另存为指定文件中
[[email protected] tmp]# sed -n ‘4w /tmp/test1‘ userpasswd.txt
[[email protected] tmp]# cat test1
4 28f37
[[email protected] tmp]#7、s/模式/字符/：查找替换，也可以写成s#模式#字符#、[email protected]模式@字符【s/需要查找的内容/替换的内容】
修饰符：
g：替换所有(全局替换)
[[email protected] tmp]# sed ‘s#stu01#stu#g‘ userpasswd.txt
1 stu
2 9cab8
3 stu02
…
[[email protected] tmp]# sed -n ‘s#stu01#stu#g‘p userpasswd.txt （只打印符合条件的行）
1 stu
[[email protected] tmp]#
i：忽略字符的大小写
[[email protected] tmp]# sed ‘s#sTu01#stu#g‘ userpasswd.txt
1 stu01
2 9cab8
3 stu02
…
[[email protected] tmp]# sed ‘s#sTu01#stu#gi‘ userpasswd.txt
1 stu
2 9cab8
3 stu02
…8、l：打印不可见字符
[[email protected] tmp]# sed -n l userpasswd.txt
1 stu01$
2 9cab8$
3 stu02$
4 28f37$
5 stu03$
…
[[email protected] tmp]#特殊符号：
&：代表被替换的内容
[[email protected] tmp]# sed ‘s#t#--&--#g‘ userpasswd.txt
1 s--t--u01
2 9cab8
3 s--t--u02
4 28f37
5 s--t--u03
…以上是关于三剑客之sed的主要内容，如果未能解决你的问题，请参考以下文章