第10章 Shell编程_字符截取命令

Posted 2020-08-26 浅墨浓香

2. 字符截取命令

2.1 cut字段提取命令（grep提取行，cut提取列）

（1）cut命令：#cut [选项] 文件名

　　选项：　-f 列号：提取第几列；

　　　　　　-d 分隔符：按照指定分隔符分割列，默认是制表符分隔。

（2）应用举例

　　//测试文件（student.txt）

ID	Name		gender		php		Linux		mysql		Average
1	ZS		M		82		95		86		87.66
2	LS		F		74		96		87		85.66		
3	WW		M		99		83		93		91.66

　　①#cut –f 2 student.txt  //提取第2列

　　②#cut –f 2,3 student.txt //提取第2、3列

　　③#cut –d ":" –f 1,3 /etc/password //用“:”分隔各列，提取第1、3列。

　　④批量删除普通用户：

　　　　# cat /etc/passwd | grep /bin/bash | grep -v root | cut -d ":" -f 1 (注意，只有root和普通用户登录时才会执行/bin/bash脚本。grep –v root去除掉root用户，这时只剩普通用户，再通过cut提取出用户名)

（3）cut命令的局限：如果以空格分隔，则会遇到计算空格不便的问题（如，#df –h显示的信息是以空格分隔的，可使用awk命令解决）

2.2 printf命令

（1）格式化输出命令：printf ‘输出类型输出格式‘ 输出内容

输出类型	说明
%ns	输出字符串。n是数字指代输出几个字符
%ni	输出整数。n是数字指代输出几个数字
%m.nf	输出浮点数。m和n是数字，指代输出的整数位数和小数位数。如%8.2f代表共输出8位数，其中2位小数，6位是整数。
输出格式	说明
\a	输出警告声音
\b	输出退格键，也就是Backspace键
\f	清除屏幕
\n	换行
\r	回车，也就是Enter键
\t	水平Tab键
\v	垂直Tab键

（2）应用举例

　　①#printf ‘%s %s %s‘  1 2 3 4 5 6 //分为两组“1 2 3”，“4 5 6”，然后输出

　　②#printf ‘%s %s %s\n‘  1 2 3 4 5 6 //分为两组“1 2 3”，“4 5 6”，并换行输出

　　③#printf ‘%s‘ $(cat student.txt) //用cat系统命令查询student.txt的内容，并用printf显示出来。

　　④#printf ‘%s\t%s\t%s\t%s\t%s\t%s\t\n‘ $(cat student.txt) //带格式化输出

（3）在awk命令的输出中支持print和printf命令

　　①print: 会在每个输出之后自动加入一个换行符（Linux默认没有print命令，但awk命令自带一个print命令）

　　②printf：是标准格式输出命令，并不会自动加入换行符，如果需要换行，需要手工加入换行符。

2.3 awk命令

（1）awk命令简介

　　①awk是三个人名的缩写，他们是：Aho、(Peter)Weinberg和(Brain)Kernighan。正是这三个人创造了awk---一个优秀的样式扫描与处理工具。

　　②awk的功能是什么？与sed和grep很相似，awk是一种样式扫描与处理工具。但其功能却大大强于sed和grep。awk提供了极其强大的功能：它几乎可以完成grep和sed所能完成的全部工作，同时，它还可以可以进行样式装入、流控制、数学运算符、进程控制语句甚至于内置的变量和函数。它具备了一个完整的语言所应具有的几乎所有精美特性。实际上，awk的确拥有自己的语言：awk程序设计语言，awk的三位创建者已将它正式定义为：样式扫描和处理语言。

（2）命令格式：#awk ‘条件1{动作1} 条件2｛动作2｝…‘ 文件名

条件(Pattern)	说明		动作（action）
x>10	判断变量x是否大于10		格式化输出
x>=10	大于等于10		流程控制语句
▲一般使用关系表达式作为条件

【编程实验】awk命令

　　①#awk ‘{printf $2 "\t" $7 "\n"}‘ student.txt //显示student.txt第2、7列并以Tab键格式化输出

　　　　Name    Average

　　　　ZS      87.66

　　　　LS      85.66

　　　　WW      91.66

　　②# df -h | awk ‘{print $1 "\t" $5 "\t" $6}‘  //显示磁盘信息

　　　　Filesystem      Use%    Mounted

　　　　/dev/sda5       8%      /

　　　　tmpfs   0%      /dev/shm

　　　　/dev/sda1       16%     /boot

　　　　/dev/sda2       1%      /home

　　　　/dev/sdb1       1%      /disk1

　　　　/dev/sdb5       1%      /disk5

　　③提取磁盘使用率

 

（3）BEGIN：在所有的命令执行之前，执行BEGIN后面的语句

　　①先显示提示信息，再显示命令结果

　　# awk ‘BEGIN{printf "This is a transcript\n"}{printf $2 "\t" $6 "\n"}‘ student.txt

　　　　This is a transcript

　　　　Name    MySQL

　　　　ZS      86

　　　　LS      87

　　　　WW      93

　　②以“：”为分隔符提取/etc/passwd的第1和第3字段

　　#awk ‘BEGIN{FS=":"}{print $1 "\t" $3}‘ /etc/passwd

（4）END：在所有命令执行之后，执行END后面的语句

　　①# awk ‘END{printf "The End\n"}{printf $2 "\t" $7 "\n"}‘ student.txt

（5）FS内置变量：分隔符

 

（6）关系运算符：# cat student.txt | grep -v Name | awk ‘$7 >=87{printf $2 "\n"}‘

 

2.4 sed命令

（1）sed命令简介

　　sed是一种几乎包括在所有UNIX平台（包括Linux）的轻量级流编辑器。sed主要是用来将数据进行选择、替换、删除、新增的命令。

（2）sed命令：#sed [选项] ‘[动作]‘ 文件名

选项	说明
-n	一般sed命令会把所有数据都输出到屏幕，如果加入此项，则只会经过sed命令处理的行输出到屏幕。
-e	允许对输入数据应用多条sed命令编辑
-i	用sed的修改结果直接修改读取数据的文件，而不是由屏幕输出。即修改结果会被写入文件。
动作	说明
a	追加，在当前行后添加一行或多行。添加多行时，除最后一行外，每行末尾需要用“\”代表数据未完结。
c	行替换，用c后面的字符串替换原数据行，替换多行时，除最后一行外，每行末尾需用“\”代表数据未完结
i	插入，在当前行前插入一行或多行。插入多行时，除最后一行外，每行末尾需要用“\”代表数据未完结。
d	删除，删除指定行
p	打印，输出指定的行
s	字串替换，用一个字符串替换另外一个字符串。格式为“行范围s/旧字符串/新字串/g”（和vim中的替换格式类似）

（3）行数据操作

　　①# sed -n ‘2p‘ student.txt //查看文件的第2行。注意，如果不加-n，除了显示第2行外，还会将原文件输出一遍

　　②# sed ‘2,4d‘ student.txt  //删除第2到第4行数据，但不影响文件本身

　　③# sed ‘2a hello‘ student.txt //在第2行后追加hello

　　④# sed ‘2i hello world‘ student.txt //在第2行前插入hello world

　　⑤# sed ‘2i hello \         //在第2行前插入两行：hello和world

　　　　world‘ student.txt

　　⑥# sed ‘2c No such person‘ student.txt //将第2行数据替换为指定文本。

（4）字符串替换：#sed ‘s/旧字串/新字串/g‘ 文件名

　　①# sed ‘3s/74/99/g‘ student.txt  //在第3行中，把74换成99

　　②# sed -i ‘3s/74/99/g‘ student.txt  //sed操作的数据直接写入文件，不显示在屏幕上。

　　③# sed -e ‘s/ZS//g;s/LS//g‘ student.txt //同时把“ZS”和“LS”替换为空