sed命令详解

Posted 2023-05-13

参考技术A

原文链接：sed命令_Linux sed 命令用法详解：功能强大的流式文本编辑器 http://man.linuxde.net/sed
未经作者同意，仅做学习，不做商业使用，如作者表示异议我会立刻删除。建议大家关注原文网站
sed 是一种流编辑器，它是文本处理中非常中的工具，能够完美的配合正则表达式使用，功能不同凡响。处理时，把当前处理的行存储在临时缓冲区中，称为“模式空间”（pattern space），接着用sed命令处理缓冲区中的内容，处理完成后，把缓冲区的内容送往屏幕。接着处理下一行，这样不断重复，直到文件末尾。文件内容并没有 改变，除非你使用重定向存储输出。Sed主要用来自动编辑一个或多个文件；简化对文件的反复操作；编写转换程序等。

文件：指定待处理的文本文件列表。

s命令
替换文本中的字符串：

-n选项和p命令一起使用表示只打印那些发生替换的行：

直接编辑文件选项-i，会匹配file文件中每一行的第一个book替换为books：

全面替换标记g
使用后缀** /g** 标记会替换每一行中的所有匹配：

当需要从第N处匹配开始替换时，可以使用 /Ng：

定界符
以上命令中字符 / 在sed中作为定界符使用，也可以使用任意的定界符：

定界符出现在样式内部时，需要进行转义：

删除操作：d命令
删除空白行：

删除文件的第2行：

删除文件的第2行到末尾所有行：

删除文件最后一行：

删除文件中所有开头是test的行：

已匹配字符串标记&
正则表达式 \\w+ 匹配每一个单词，使用 [&] 替换它，& 对应于之前所匹配到的单词：

所有以192.168.0.1开头的行都会被替换成它自已加localhost：

子串匹配标记\\1
匹配给定样式的其中一部分：

组合多个表达式
sed \'表达式\' | sed \'表达式\'
等价于：
sed \'表达式; 表达式\'

引用
sed表达式可以使用单引号来引用，但是如果表达式内部包含变量字符串，就需要使用双引号。

选定行的范围：,（逗号）
所有在模板test和check所确定的范围内的行都被打印：

打印从第5行开始到第一个包含以test开始的行之间的所有行：

对于模板test和west之间的行，每行的末尾用字符串aaa bbb替换：

多点编辑：e命令
-e选项允许在同一行里执行多条命令：

上面sed表达式的第一条命令删除1至5行，第二条命令用check替换test。命令的执行顺序对结果有影响。如果两个命令都是替换命令，那么第一个替换命令将影响第二个替换命令的结果。

和 -e 等价的命令是 --expression：

从文件读入：r命令
file里的内容被读进来，显示在与test匹配的行后面，如果匹配多行，则file的内容将显示在所有匹配行的下面：

写入文件：w命令
在example中所有包含test的行都被写入file里：

追加（行下）：a\\命令
将 this is a test line 追加到 以test 开头的行后面：

在 test.conf 文件第2行之后插入 this is a test line：

插入（行上）：i\\命令
将 this is a test line 追加到以test开头的行前面：

在test.conf文件第5行之前插入this is a test line：

下一个：n命令
如果test被匹配，则移动到匹配行的下一行，替换这一行的aa，变为bb，并打印该行，然后继续：

变形：y命令
把1~10行内所有abcde转变为大写，注意，正则表达式元字符不能使用这个命令：

退出：q命令
打印完第10行后，退出sed

保持和获取：h命令和G命令
在sed处理文件的时候，每一行都被保存在一个叫模式空间的临时缓冲区中，除非行被删除或者输出被取消，否则所有被处理的行都将 打印在屏幕上。接着模式空间被清空，并存入新的一行等待处理。

在这个例子里，匹配test的行被找到后，将存入模式空间，h命令将其复制并存入一个称为保持缓存区的特殊缓冲区内。第二条语句的意思是，当到达最后一行后，G命令取出保持缓冲区的行，然后把它放回模式空间中，且追加到现在已经存在于模式空间中的行的末尾。在这个例子中就是追加到最后一行。简单来说，任何包含test的行都被复制并追加到该文件的末尾。

保持和互换：h命令和x命令
互换模式空间和保持缓冲区的内容。也就是把包含test与check的行互换：

脚本scriptfile
sed脚本是一个sed的命令清单，启动Sed时以-f选项引导脚本文件名。Sed对于脚本中输入的命令非常挑剔，在命令的末尾不能有任何空白或文本，如果在一行中有多个命令，要用分号分隔。以#开头的行为注释行，且不能跨行。

打印奇数行或偶数行
方法1：

方法2：

打印匹配字符串的下一行

linux之sed命令详解

sed是一个非交互式文本编辑器，它可以对文本文件和标准输入进行编辑，标准输入可以来自键盘输入，文件重定向，字符串，变量，或者是管道的文本。并将其复制到缓冲区，然后读取命令行的命令，对此命令要求的行号进行编辑。

用法：

sed共有三种用法：

①直接在命令行中使用 

　　sed [选项] ‘sed命令‘ 输入文件

②将sed命令写入脚本文件中，使用sed命令调用

　　sed [选项] -f sed脚本文件 输入文件

③将sed命令写入脚本文件中，并设置为可执行

　　./sed 脚本文件 输入文件

其中第③种的脚本文件中需要使用#!符号开头。

sed常用的选项

-n：不打印所有的行到标准输出,只输出那些被命令影响到的行

-e：表示将下一个字符串解析为sed编辑命令，如果只有一个编辑命令，则-e可以省略

-f：表示正在调用sed脚本文件

-r：表示支持延伸型的正则表示法(默认只支持基础正则表示法)

-i：直接修改读取的文件内容，而不是通过屏幕输出。

sed命令

sed命令通常由两部分组成。文本定位和sed编辑命令。

文本定位对文本的部分行进行抽取，编辑命令对抽取的行进行编辑。

sed定位方式

sed提供了两种定位方式：

①通过行号，指定一行或者行号范围

②使用正则表达式

定位方式：

x：x为指定行号

x,y：指定从x到y的行号范围

/pattern/：查询包含模式的行

/pattern/pattern/：查询包含两个模式的行

x,/pattern/：从x行到patter模式匹配的行之间

x,y!：查询不包括x和y行号的行

sed编辑命令

p：打印匹配行

=：打印文件行号

a：在定位行号之后追加文本信息

i：在定位行号之前插入文本信息

d：删除定位行

c：使用新文本替换文本行

s：使用替换模式替换相应模式

r：从另一个文件中读取文本

w：将文本写入到一个文件

y：变换字符

q：第一个模式匹配后退出

{}：在定位行执行命令组

n：读取下一个输入行，用下一个命令处理新的行

说了这么多，我们就先来体验一下：

[[email protected] 15:11 ~/stu]$ nl test
     1  first line
     2  second line
     3  l i n e
     4  what is this
[[email protected] 15:11 ~/stu]$ sed ‘2d‘ test 
first line
l i n e
what is this

这就是sed的一个基本使用方式。

sed ‘2d‘ test：2表示定位到第二行，d表示删除，test表示输入文件。

选项-n的用法

[[email protected] 16:22 ~/stu]$ cat test
first line
second line
l i n e
what is this
[[email protected] 16:22 ~/stu]$ sed -n ‘2,4p‘ test
second line
l i n e
what is this
[[email protected] 16:22 ~/stu]$

除了使用-e选项外，还可以使用{}和；来实现相同的功能

[[email protected] 17:04 ~/stu]$ cat test | sed -n ‘3,$‘ {d;p}
sed：-e 表达式 #1，字符 3：遗漏命令
-bash: p}: command not found
[[email protected] 17:04 ~/stu]$ cat test | sed -n ‘3,${d;p}‘
[[email protected] 17:05 ~/stu]$ cat test | sed -n ‘3,${p;=}‘
l i n e
3
what is this
4
[[email protected] 17:05 ~/stu]$

 

选项-e的用法

[[email protected] 16:26 ~/stu]$ cat test | sed -ne ‘2,/is/p‘ -e ‘2,/is/=‘
second line
2
l i n e
3
what is this
4
[[email protected] 16:27 ~/stu]$

 

 

选项-f的用法

首先建立一个sed的脚本文件，内容如下，并赋予可执行的权限。

[[email protected] 16:45 ~/stu]$ cat append.sed
#!/bin/sed -f
/this/athis is the first append linethis is the second append line
[[email protected] 16:45 ~/stu]$ cat test
first line
second line
l i n e
what is this
[[email protected] 16:47 ~/stu]$ which sed
/bin/sed
[[email protected] 16:47 ~/stu]$ ll
总用量 8
-rw-rw-r--. 1 fuwh fuwh 84 8月  11 16:45 append.sed
-rw-rw-r--. 1 fuwh fuwh 44 8月  11 15:10 test
[[email protected] 16:47 ~/stu]$ chmod u+x append.sed
[[email protected] 16:48 ~/stu]$ ll
总用量 8
-rwxrw-r--. 1 fuwh fuwh 84 8月  11 16:45 append.sed
-rw-rw-r--. 1 fuwh fuwh 44 8月  11 15:10 test
[[email protected] 16:52 ~/stu]$ ./append.sed test
first line
second line
l i n e
what is this
this is the first append line
this is the second append line
[[email protected] 16:53 ~/stu]$

 

替换命令s

替换命令，将匹配的文本替换成新的文本。命令格式如下：

s/被替换的字符串/新字符串/[替换选项]

替换选项和意思：

g：表示替换文本中所有出现的

p：与-n结合，只打印替换行

w 文件名：表示将输出重定向到一个文件

[[email protected] 17:33 ~/stu]$ sed ‘s/line/row/g‘ test
first row
second row
l i n e
what is this
[[email protected] 17:35 ~/stu]$