awk 的一些用法

Posted 2020-08-22 飞行的俊哥

awk，我觉得是Linux里面处理文本最精妙的命令，它是一个行处理的命令，它最初级的用法是：给定一些简单的pattern,然后按照这个pattern 去搜索匹配的行。它的高级用法是用awk来编程，除了原来的匹配字符串这个功能之外，还可以做一些统计，替换，数学计算的功能， 甚至可以编写自定义的函数，甚是神奇。

1. AWK 初级用法

 awk \'pattern\' filename
 awk \'{action}\' filename
 awk \'pattern {action}\' filename //找到有该pattern的那一行，然后执行一些动作. pattern 和 { 之间没有“，”, 可以延伸至awk \'pattern {action}; pattern2 {action2}\' filename

NR: Number of records, 第几行

NF: Number of field, 一行有几个域

OFS: Output Field Seperator, 表示输出字段间的分隔符，缺省是空格。如果不加这个参数，比如说在打印$1 和$2时， 以空格分开，如果加了这参数，以这个参数分开，见例子

 比如说 a.txt

Duplex_mode, Duplexing mode, 0
CFI_power_offset, CFI power offset, 5000
P_B, Refers to downlink power allocation, 0
DL_CP_type, Downlik cyclic prefix type, 0
UL_CP_type, Uplink cyclic prefix type, 0
DL_ch_BW, Downlink channel bandwidth in resource blocks, 50
UL_ch_BW, Uplink channel bandwidth in resource blocks, 50
RS_power, Reference signal power, 0

>>awk -F \', \' \'print $1\' a.txt                          //以‘, ’ 分隔符，打印第一个域， 注意‘, ’ 和‘,’ 不一样

>>awk -F \', \' \'/CFI/\' a.txt                             //找到有cfi的那一行，并打印出来

>> awk -F \', \' \'$3>10 {print $1}\' a.txt         //找到第三个域大于10 的行，然后打印第一个域

>> awk -F \', \' \'$1 ~ /^D._.._/ \' a.txt          //" ~ " 用来在记录或者域内匹配正则表达式, 以D开头，第三个字符是_的那一行

>> awk -F \', \' \'{OFS = "?"};  /CFI/{print $1,$2 }\' a.txt   //结果是CFI_power_offset?CFI power offset

稍微高级一点的有:

a. 多个执行动作： awk \'pattern { action statement; action statement; etc. }\'

 >>awk -F \', \' \'/CFI/{$3+=8;print $3}\' a.txt     //先加8，再打印出来

b. 范围模板匹配从第一个模板的第一次出现到第二个模板的第一次出现，第一个模板的下一次出现到第一个模板的下一次出现等等。如果第一个模板匹配而第二个模板没有出现，awk就显示到文件末尾的所有行。
>> awk -F \', \' \'/^DL_CP_type/,/^UL_ch_BW/ {print $1}\' a.txt  //找到DL_CP_type和UL_ch_BW之间的行， 并打印第一个域

参考：http://www.cnblogs.com/mchina/archive/2012/06/30/2571308.html

2. AWK 高级用法

我用一个实际的例子来分析AWK的高级用法

awk -F ", " \'/@ULS|@UCI|@DC|@DLS|@R|@S/ {x=$1}; /^RNTI, |Preamble_index/ {x=x", "$3;arr[x]++};/ACK_NACK_mode/ {cnt=arr[x];delete arr[x];x=x", "$3;arr[x]=cnt};END {for (i in arr) print i", "arr[i]}\' a.txt > b.txt

a.txt:
@ULSCH_PDU
handle, Handle returned in RX indication, 1
PDU_size, Size of ULSCH PDU in bytes, 4
RNTI, RNTI for current PDU, 80
RB_start, The starting resource block, 0
ACK_NACK_mode, ack non ack mode, 3

@ULSCH_PDU
handle, Handle returned in RX indication, 1
PDU_size, Size of ULSCH PDU in bytes, 4
RNTI, RNTI for current PDU, 80
RB_start, The starting resource block, 0
ACK_NACK_mode, ack non ack mode, 1

@DCI_DL_PDU_Fmt1
DCI_format, DCI format (0=1/1=1A/2=1B/3=1C/4=1D/5=2/6=2A), 0
CCE_idx, CCE index, 0
Aggreg_level, Aggregation level, 2
RNTI, RNTI, 60

@DLSCH_PDU
PDU_length, MAC PDU length in bytes, 109
RNTI, RNTI for current PDU, 60
Resource_alloc_type, Resource allocation type, 0
Virtual_RB_flag, Type of virtual resource block, 0
RB_coding, Resource block coding, 130560
MCS, Modulation and coding scheme, 2

@DCI_DL_PDU_Fmt1
DCI_format, DCI format (0=1/1=1A/2=1B/3=1C/4=1D/5=2/6=2A), 0
CCE_idx, CCE index, 0
Aggreg_level, Aggregation level, 2
RNTI, RNTI, 60

@DLSCH_PDU
PDU_length, MAC PDU length in bytes, 109
RNTI, RNTI for current PDU, 60
Resource_alloc_type, Resource allocation type, 0
Virtual_RB_flag, Type of virtual resource block, 0
RB_coding, Resource block coding, 130560
MCS, Modulation and coding scheme, 2

The result b.txt is

@DLSCH_PDU, 60, 2
@DCI_DL_PDU_Fmt1, 60, 2
@ULSCH_PDU, 80, 3, 1
@ULSCH_PDU, 80, 1, 1

参考： http://www.cnblogs.com/mchina/archive/2012/06/30/2571317.html