shell工具-awk

Posted zxbdboke

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了shell工具-awk相关的知识,希望对你有一定的参考价值。

awk

一个强大的文本分析工具,把文件逐行的读入,以空格为默认分隔符将每行切片,切开的部分再进行分析处理。

基本用法

awk [选项参数] pattern1{action} pattern2{action}... filename
pattern:表示AWK在数据中查找的内容,就是匹配模式
action:在找到匹配内容时执行的一系列命令

选项参数说明

选项参数功能描述
-F 指定输入文件拆分割符
-v 赋值一个用户定义变量

案例实操

数据准备

[[email protected] testshell]# cp /etc/passwd ./
[[email protected] testshell]# cat /etc/passwd
root:x:0:0:root:/root:/bin/bash
bin:x:1:1:bin:/bin:/sbin/nologin
daemon:x:2:2:daemon:/sbin:/sbin/nologin
adm:x:3:4:adm:/var/adm:/sbin/nologin
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
sync:x:5:0:sync:/sbin:/bin/sync
shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown
halt:x:7:0:halt:/sbin:/sbin/halt
mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
operator:x:11:0:operator:/root:/sbin/nologin
games:x:12:100:games:/usr/games:/sbin/nologin
ftp:x:14:50:FTP User:/var/ftp:/sbin/nologin
nobody:x:99:99:Nobody:/:/sbin/nologin
systemd-network:x:192:192:systemd Network Management:/:/sbin/nologin
dbus:x:81:81:System message bus:/:/sbin/nologin
polkitd:x:999:998:User for polkitd:/:/sbin/nologin
sshd:x:74:74:Privilege-separated SSH:/var/empty/sshd:/sbin/nologin
postfix:x:89:89::/var/spool/postfix:/sbin/nologin
chrony:x:998:996::/var/lib/chrony:/sbin/nologin
elsearch:x:1000:1000::/home/elsearch:/bin/bash

搜索passwd文件以root关键字开头的所有行,并输出该行的第7列

[[email protected] testshell]# awk -F: /^root/{print $7} passwd
/bin/bash

搜索passwd文件以root关键字开头的所有行,并输出该行的第1和7列,中间以逗号分割

[[email protected] testshell]# awk -F: /^root/{print $1","$7} passwd
root,/bin/bash
[[email protected] testshell]# awk -F: /^root/{print $1$7} passwd   
root/bin/bash

只显示/passwd文件的第一列和第七列,以逗号分割,且在所有行前面添加列名user,shell在最后一行添加“dahaige,/bin/zuishuai”

[[email protected] testshell]# awk -F: BEGIN{print "user,shell"} {print $1","$7} END{print "dahaige,/bin/zuishuai"} passwd
user,shell
root,/bin/bash
bin,/sbin/nologin
daemon,/sbin/nologin
adm,/sbin/nologin
lp,/sbin/nologin
sync,/bin/sync
shutdown,/sbin/shutdown
halt,/sbin/halt
mail,/sbin/nologin
operator,/sbin/nologin
games,/sbin/nologin
ftp,/sbin/nologin
nobody,/sbin/nologin
systemd-network,/sbin/nologin
dbus,/sbin/nologin
polkitd,/sbin/nologin
sshd,/sbin/nologin
postfix,/sbin/nologin
chrony,/sbin/nologin
elsearch,/bin/bash
dahaige,/bin/zuishuai

将passwd文件中的用户id增加数值1并输出

[[email protected] testshell]# awk -F : -v i=1 {print $3+i} passwd 
1
2
3
4
5
6
7
8
9
12
13
15
100
193
82
1000
75
90
999
1001

awk的内置变量

变量说明
FILENAME 文件名
NR 已读的记录数
NF 浏览记录的域的个数(切割后列的个数)

案例实操

统计passwd文件名,每行的行号,每行的列数

[[email protected] testshell]# awk -F: {print "filename:" FILENAME ", linenumber:" NR ",columns:" NF} passwd 
filename:passwd, linenumber:1,columns:7
filename:passwd, linenumber:2,columns:7
filename:passwd, linenumber:3,columns:7
filename:passwd, linenumber:4,columns:7
filename:passwd, linenumber:5,columns:7
filename:passwd, linenumber:6,columns:7
filename:passwd, linenumber:7,columns:7
filename:passwd, linenumber:8,columns:7
filename:passwd, linenumber:9,columns:7
filename:passwd, linenumber:10,columns:7
filename:passwd, linenumber:11,columns:7
filename:passwd, linenumber:12,columns:7
filename:passwd, linenumber:13,columns:7
filename:passwd, linenumber:14,columns:7
filename:passwd, linenumber:15,columns:7
filename:passwd, linenumber:16,columns:7
filename:passwd, linenumber:17,columns:7
filename:passwd, linenumber:18,columns:7
filename:passwd, linenumber:19,columns:7
filename:passwd, linenumber:20,columns:7

切割IP

[[email protected] testshell]# ifconfig ens33 | grep "inet "
        inet 192.168.242.22  netmask 255.255.255.0  broadcast 192.168.242.255
[[email protected] testshell]# ifconfig ens33 | grep "inet "
        inet 192.168.242.22  netmask 255.255.255.0  broadcast 192.168.242.255
[[email protected] testshell]# ifconfig ens33 | grep "inet " | awk -F "inet " {print $2}
192.168.242.22  netmask 255.255.255.0  broadcast 192.168.242.255
[[email protected] testshell]# ifconfig ens33 | grep "inet " | awk -F "inet " {print $2} | awk -F " " {print $1}
192.168.242.22

查询sed.txt中空行所在的行号

[[email protected] testshell]# cat sed.txt 
dong shen
guan zhen
wo  wo
lai  lai

le  le
[[email protected] testshell]# awk /^$/{print NR} sed.txt 
5

 

以上是关于shell工具-awk的主要内容,如果未能解决你的问题,请参考以下文章

shell脚本之awk工具的使用

Shell编程awk工具

Shell编程之正则表达式三剑客——awk工具

详解Shell脚本:sed命令工具 ,awk命令工具

Shell脚本之awk详解

Shell工具cut/sed/awk/sort