linux之文本内容替换命令sed

Posted 2023-05-04

参考技术A sed简介：流编辑工具，用来对文本进行过滤与替换操作。

sed流程：sed通过一次仅读取一行内容来对某些指令进行处理后输出。

1、sed通过文件或管道读取文件内容，但sed默认并不直接修改源文件，而是将读入的内容复制到缓冲区中，称之为模式空间。
2、所有的指令操作都是在模式空间找那个进行
3、sed根据相应的指令对模式空间中的内容进行处理并输出结果，默认输出至标准输出（即屏幕上）。

sed基本语法格式：
用法：sed[选项]...脚本指令[输入文件]...
选项： -version 显示sed版本
-help ：显示帮助文档
-n,-quiet,-silent静默输出，默认情况下，sed程序在所有的脚本指令执行完毕后，将自动打印模式空间中的内容。
-e script允许多个脚本指令被执行
-f script-file从文件中读取脚本指令，对编写自动化脚本程序很实用
-i ,-in-place 该选项直接修改源文件
-l N 该选项指定l指令可以输出的行长度，l指令为输出非打印字符。
-posix 禁用GNU sed扩展功能。
-r 在脚本指令中使用扩展正则表达式。
-s，-separate 默认情况下，sed将把输入的多个文件名作为一个长的连续的输入流。而GNU sed则允许把它们当作单独的文件。
-u，-unbuffered 最低限度的缓存输入与输出
a，append表示追加指令；
i，insert表示插入指令；
d，delete表示删除指令；
s，substitution表示替换指令。
sed脚本指令的基本格式是：
[地址,即路径]命令（有些命令仅可以对一行操作，有些可以对多行操作），命令也可以用花括号进行组合，使命令序列可以作用于同一个地址。
address
command1
command2
command3


sed的基本工作方式是：

sed的替换命令s：

1、全局替换 ： s/old/new/g ，其中g为全局替换，用于替换所有出现的次数； /如果和正则匹配的内容冲突可以使用其他符号，如 ： s@old@new@g
2、标志位

为什么要有多行模式: 配置文件一般有单行出现，但也有使用json或XML格式的配置文件，为多行出现。
多行模式处理命令N、D、P

linux三剑客之sed入门详解

sed介绍
sed流编辑器（stream editor），在三剑客中排行老二，是一款简单的文本编辑语言。sed并不直接处理源文件，而是逐行读取源文件的内容到内存（称模式空间）中，然后在模式空间中使用sed命令处理，再打印模式空间处理后的内容到标准输出。
sed的能够实现的功能：增删改查、替换、过滤、取行。
sed文本处理原理图

---

sed命令的语法：
sed [选项] ‘AddressCommand [修饰符]’inputfile（输入文件）
sed命令语法各参数解释

---

实验环境

[[email protected] tmp]# cat userpasswd.txt 
1  stu01
2  9cab8
3  stu02
4  28f37
5  stu03
6  cd4ef
7  stu04
8  221ec
9  stu05
10  f7a98
[[email protected] tmp]#

---

选项

-n： 取消默认输出，不打印（输出）模式空间的内容
常与p连用，只打印符合条件的行（取消默认输出，但打印符合条件的行）

[[email protected] tmp]# sed -n ‘s#stu01#stu#g‘p userpasswd.txt 
1  stu
[[email protected] tmp]#  

-i：直接修改源文件（谨慎使用，以免操作失误导致源文件损坏）
-e：多个操作同时进行
-r：使用扩展表达式

---

Address:地址范围

1、LineNumber：特定的行，指定第几行，即n；$：表示最后一行

[[email protected] tmp]# sed -n 2p userpasswd.txt 
2  9cab8
[[email protected] tmp]#
[[email protected] tmp]# sed -n ‘$p‘ userpasswd.txt 
10  f7a98
[[email protected] tmp]#

2、Start,End：起始行,结束行，例如“2,5”，从第2行到第5行
[[email protected] tmp]# sed -n 2,5p userpasswd.txt

2  9cab8
3  stu02
4  28f37
5  stu03
[[email protected] tmp]#

3、mode1,mode2：从第一次被模式1匹配的行开始，到第一次被模式2匹配的行结束

[[email protected] tmp]# sed -n ‘/stu02/,6p‘ userpasswd.txt  
3  stu02
4  28f37
5  stu03
6  cd4ef
[[email protected] tmp]#

4、StartLine,+n：从StartLine开始往后n行，例如：“5，+2”，从第5行开始往后2行，即从第5行到第7行

[[email protected] tmp]# sed -n 5,+2p userpasswd.txt 
5  stu03
6  cd4ef
7  stu04
[roo[email protected] tmp]#

5、/^root/：地址范围可以使用正则表达式，但必须要用符号“/ /”括起来，此处的含义是找出以root开头的行

[[email protected] tmp]# sed -n ‘/.*stu.*/p‘ userpasswd.txt 
1  stu01
3  stu02
5  stu03
7  stu04
9  stu05
[[email protected] tmp]#

---

Command: sed执行命令
1、d：删除符合条件的行

[[email protected] tmp]# sed 2,3d userpasswd.txt    
1  stu01
4  28f37
5  stu03
6  cd4ef
7  stu04
8  221ec
9  stu05
10  f7a98
[[email protected] tmp]#

2、p：打印符合条件的行（输出）

[[email protected] tmp]# sed -n 3,4p userpasswd.txt 
3  stu02
4  28f37
[[email protected] tmp]#

3、’a 内容’：在指定的行后面追加新的内容

[[email protected] tmp]# sed ‘2a 11  hello‘ userpasswd.txt    
1  stu01
2  9cab8
11  hello
3  stu02
4  28f37
…

4、’i 内容’：在指定的行前追加新的内容

[[email protected] tmp]# sed ‘2i 11  hello‘ userpasswd.txt  
1  stu01
11  hello
2  9cab8
3  stu02
4  28f37
…

5、r file：将指定的文件内容添加到符合条件的行后面

[[email protected] tmp]# cat test 
who
[[email protected] tmp]# sed ‘2r /tmp/test‘ userpasswd.txt 
1  stu01
2  9cab8
who
3  stu02
4  28f37
…

6、w file：将符合条件的行的内容另存为指定文件中

[[email protected] tmp]# sed -n ‘4w /tmp/test1‘ userpasswd.txt 
[[email protected] tmp]# cat test1
4  28f37
[[email protected] tmp]#

7、s/模式/字符/：查找替换，也可以写成s#模式#字符#、[email protected]模式@字符【s/需要查找的内容/替换的内容】
修饰符：
g：替换所有(全局替换)

[[email protected] tmp]# sed ‘s#stu01#stu#g‘ userpasswd.txt 
1  stu
2  9cab8
3  stu02
…
[[email protected] tmp]# sed -n ‘s#stu01#stu#g‘p userpasswd.txt （只打印符合条件的行）
1  stu
[[email protected] tmp]#

i：忽略字符的大小写
[[email protected] tmp]# sed ‘s#sTu01#stu#g‘ userpasswd.txt      
1  stu01
2  9cab8
3  stu02
…
[[email protected] tmp]# sed ‘s#sTu01#stu#gi‘ userpasswd.txt  
1  stu
2  9cab8
3  stu02
…

8、l：打印不可见字符

[[email protected] tmp]# sed -n l userpasswd.txt 
1  stu01$
2  9cab8$
3  stu02$
4  28f37$
5  stu03$
…
 [[email protected] tmp]#

特殊符号：
&：代表被替换的内容

[[email protected] tmp]# sed ‘s#t#--&--#g‘ userpasswd.txt 
1  s--t--u01
2  9cab8
3  s--t--u02
4  28f37
5  s--t--u03
…