Linux系统之sed常用方法

Posted 2022-05-19 江湖有缘

Linux系统之sed常用方法

• 一、Sed的用法
• 二、使用sed打印文本指定内容
• • 1.打印passwd文件的第5行内容
  • 2.打印passwd文件的最后一行
  • 3.打印passwd的第1-5行
  • 4.打印文件passwd带有/root的行，并忽略大小写
• 三、使用sed对文本进行修改
• • 1.删除第1行到第三行
  • 2.删除10行后的行
  • 3.删除passwd 中所有特殊字符（除了数字以及大小写字母）
  • 4.每行开头第一份字符删掉
  • 5.删除test.txt中5到10行中所有的数字
• 四、使用sed对文本进行替换
• • 1.将root替换为toor
  • 2.替换test.txt中’/sbin/nologin’为’/bin/login’，并打印出替换的行
• 五、使用sed给文本新增内容
• • 1.在paaswd上每行开头加#
  • 2.在passwd上第2行前面加mysql
• 六、sed的进阶用法
• • 1.日常修改文本前备份源文本
  • 2.将/etc/passwd文件的所有单词进行统计词频，并输出格式为一行一个单词

一、Sed的用法

sed [-hnV][-e<script>][-f<script文件>][文本文件]
参数说明：

-e<script>或--expression=<script> 以选项中指定的script来处理输入的文本文件。
-f<script文件>或--file=<script文件> 以选项中指定的script文件来处理输入的文本文件。
-h或--help 显示帮助。
-n或--quiet或--silent 仅显示script处理后的结果。
-V或--version 显示版本信息。
动作说明：

a ：新增， a 的后面可以接字串，而这些字串会在新的一行出现(目前的下一行)～
c ：取代， c 的后面可以接字串，这些字串可以取代 n1,n2 之间的行！
d ：删除，因为是删除啊，所以 d 后面通常不接任何东东；
i ：插入， i 的后面可以接字串，而这些字串会在新的一行出现(目前的上一行)；
p ：打印，亦即将某个选择的数据印出。通常 p 会与参数 sed -n 一起运行～
s ：取代，可以直接进行取代的工作哩！通常这个 s 的动作可以搭配正规表示法！例如 1,20s/old/new/g 就是啦！

二、使用sed打印文本指定内容

1.打印passwd文件的第5行内容

[root@server-01 ~]# sed -n 5p /etc/passwd
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin

2.打印passwd文件的最后一行

[root@server-01 ~]# sed -n '$p' /etc/passwd
user1:x:2000:1000::/home/user1:/bin/bash

3.打印passwd的第1-5行

[root@server-01 ~]# sed -n '1,5 p' /etc/passwd
root:x:0:0:root:/root:/bin/bash
bin:x:1:1:bin:/bin:/sbin/nologin
daemon:x:2:2:daemon:/sbin:/sbin/nologin
adm:x:3:4:adm:/var/adm:/sbin/nologin
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin

4.打印文件passwd带有/root的行，并忽略大小写

[root@server-01 ~]# sed -n '/root/IP' /etc/passwd
root:x:0:0:root:/root:/bin/bash
operator:x:11:0:operator:/root:/sbin/nologin

三、使用sed对文本进行修改

1.删除第1行到第三行

[root@server-01 ~]# sed '1,5 d' passwd

2.删除10行后的行

[root@server-01 ~]# sed '10,$ d' passwd 
root:x:0:0:root:/root:/bin/bash
bin:x:1:1:bin:/bin:/sbin/nologin
daemon:x:2:2:daemon:/sbin:/sbin/nologin
adm:x:3:4:adm:/var/adm:/sbin/nologin
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
sync:x:5:0:sync:/sbin:/bin/sync
shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown
halt:x:7:0:halt:/sbin:/sbin/halt
mail:x:8:12:mail:/var/spool/mail:/sbin/nologin

3.删除passwd 中所有特殊字符（除了数字以及大小写字母）

sed -r 's/[^0-9a-zA-Z]+//g p' passwd

4.每行开头第一份字符删掉

 sed -n 's/^.// p' passwd

5.删除test.txt中5到10行中所有的数字

sed -n -r '5,10 s/[0-9]+//g p' passwd 
-r是扩展正则，+是1到多次的匹配前面一个字符

四、使用sed对文本进行替换

1.将root替换为toor

[root@server-01 ~]# sed -n 's/root/toor/gi p' passwd 
toor:x:0:0:toor:/toor:/bin/bash
operator:x:11:0:operator:/toor:/sbin/nologin

2.替换test.txt中’/sbin/nologin’为’/bin/login’，并打印出替换的行

[root@server-01 ~]# sed -n 's@/sbin/nologin@/bin/login@ p' passwd 
bin:x:1:1:bin:/bin:/bin/login
daemon:x:2:2:daemon:/sbin:/bin/login
adm:x:3:4:adm:/var/adm:/bin/login
lp:x:4:7:lp:/var/spool/lpd:/bin/login
mail:x:8:12:mail:/var/spool/mail:/bin/login
operator:x:11:0:operator:/root:/bin/login
games:x:12:100:games:/usr/games:/bin/login
ftp:x:14:50:FTP User:/var/ftp:/bin/login
nobody:x:65534:65534:Kernel Overflow User:/:/bin/login
dbus:x:81:81:System message bus:/:/bin/login
systemd-coredump:x:999:997:systemd Core Dumper:/:/bin/login
systemd-resolve:x:193:193:systemd Resolver:/:/bin/login
tss:x:59:59:Account used by the trousers package to sandbox the tcsd daemon:/dev/null:/bin/login
polkitd:x:998:996:User for polkitd:/:/bin/login
unbound:x:997:995:Unbound DNS resolver:/etc/unbound:/bin/login
postfix:x:89:89::/var/spool/postfix:/bin/login
sssd:x:996:993:User for sssd:/:/bin/login
sshd:x:74:74:Privilege-separated SSH:/var/empty/sshd:/bin/login
chrony:x:995:992::/var/lib/chrony:/bin/login
rngd:x:994:991:Random Number Generator Daemon:/var/lib/rngd:/bin/login
tcpdump:x:72:72::/:/bin/login
apache:x:48:48:Apache:/usr/share/httpd:/bin/login
mysql:x:27:27:MySQL Server:/var/lib/mysql:/bin/login

五、使用sed给文本新增内容

1.在paaswd上每行开头加#

sed 's/^/#/ p' passwd

2.在passwd上第2行前面加mysql

sed -r '2 i\\mysql' passwd

六、sed的进阶用法

1.日常修改文本前备份源文本

[root@server-01 ~]# sed -i.bak '1,2 d' passwd 
[root@server-01 ~]# ll
total 2244
-rw-r--r-- 1 root root    3042 May  2 18:29 ist
-rw-r--r-- 1 root root      32 May 10 17:49 pass.txt
-rw-r--r-- 1 root root    1333 May 18 00:20 passwd
-rw-r--r-- 1 root root    1398 May 18 00:00 passwd.bak
-rw-r--r-- 1 root root       0 Nov 23 20:09 peeson.txt
-rw-r--r-- 1 root root      13 Nov 23 20:10 person.txt
-rw-r--r-- 1 root root 2121481 Dec 13 02:12 wget-log
-rw-r--r-- 1 root root  144922 Dec 13 11:04 wget-log.1

2.将/etc/passwd文件的所有单词进行统计词频，并输出格式为一行一个单词

cat /etc/passwd| sed -r 's/[0-9]+//g' | tr ' ' '\\n' | tr '/' '\\n' | tr ':' '\\n' | sort | uniq -c  | awk 'print $2,$1'