SHELL脚本攻略（学习笔记）--2.5 tr

Posted 2020-08-12

tr主要用于映射结果集、压缩和删除字符。我个人感觉特别有用，特别是压缩连续空格（空行）为一个空格（空行），让不规则的信息变得规则。

2.5.1 tr映射

tr [options] [SET1] [SET2]

如果同时指定了SET1和SET2，则实现的是将SET1的符号按位置一一对应映射为SET2中的符号。实际上就是对应替换。

tr接收到stdin后首先会把标记意义上的符号替换为换行符，然后才执行指定的选项参数。什么是标记意义上的符号请看xargs的内容http://www.cnblogs.com/f-ck-need-u/p/5925923.html。

例如：

[[email protected] tmp]# ls

a  b  c  d  logdir  one  one space.log  shdir  sh.txt  space.log  test  vmware-root

[[email protected] tmp]# ls | tr " " "\\t"  ç由于先替换为换行符，所以有且只有一个文本意义上的空格被替换为制表符

a

b

c

d

logdir

one

one     space.log

shdir

sh.txt

space.log

test

vmware-root

如果在SET1中使用了\\n，会发现最后的结果中是紧接着命令提示符。就像下面的。这就是因为原本最后一行的尾部是有分行符的，替换之后就没有了分行符。

[[email protected] tmp]# echo {1..10} | tr "\\n" "x"   

1 2 3 4 5 6 7 8 9 10x[[email protected] tmp]#

之所以说tr是映射而不是替换，是因为两个结果集替换的时候符号位置是一一对应的。例如下面例子的第二条命令，因为\\n是SET1中的唯一一个也是第一个符号位，所以SET2中只取第一个符号位“X”进行替换。Y字符就被忽略了。

[[email protected] tmp]# ls | tr "\\n" "X"

aXbXcXdXlogdirXoneXone space.logXshdirXsh.txtXspace.logXtestXvmware-rootX

[[email protected] tmp]# ls | tr "\\n" "XY"

aXbXcXdXlogdirXoneXone space.logXshdirXsh.txtXspace.logXtestXvmware-rootX

那么这样就可以实现简单的加密和解密了。

[[email protected] tmp]# echo "12345" | tr "0-9" "9876543210"     ç加密

87654

[[email protected] tmp]# echo "87654" | tr "0-9" "9876543210"     ç解密

12345

上面的过程是将管道左边的12345对应到0-9的展开式0123456789，并将对应位映射到SET2的数字上。解密也是同理。

更典型的是ROT13加密算法，它的加密和解密使用一套字符。它的SET1的字母位和SET2的字母位完全反向成对。例如SET1指定符号是“axy”，如果SET2想将其对应为“opq”，则须将SET1扩展为“axyopq”，SET2扩展为“opqaxy”，最终是（a,x,y,o,p,q）和（o,p,q,a,x,y）,这样（a,o）和（o,a）就配对了，无论加密还是解密都能使用这一套字符。将其扩展为A-Z和a-z就是ROT13加密，甚至还可以将0-9也加上去和9-0对应。下面是SET1和SET2的对应式。

ABCDEFGHIJKLMNOPQRSTUVWXYZabcdefghijklmnopqrstuvwxyz

NOPQRSTUVWXYZABCDEFGHIJKLMnopqrstuvwxyzabcdefghijklm

现在加密“I love you”

[[email protected] tmp]# echo "I love you" | tr "ABCDEFGHIJKLMNOPQRSTUVWXYZabcdefghijklmnopqrstuvwxyz" "NOPQRSTUVWXYZABCDEFGHIJKLMnopqrstuvwxyzabcdefghijklm"

V ybir lbh

将“V ybir lbh”解密。

[[email protected] tmp]# echo "V ybir lbh" | tr "ABCDEFGHIJKLMNOPQRSTUVWXYZabcdefghijklmnopqrstuvwxyz" "NOPQRSTUVWXYZABCDEFGHIJKLMnopqrstuvwxyzabcdefghijklm"

I love you

2.5.2 完全对应的替换

默认情况下，当指定的SET1比SET2字符长时，从最后一个对应的位置开始，SET1的剩余字符都和SET2的最后一个字符对应。假如SET1=[1234]，SET2=[abc]，则3对应c，4也对应c，此时如果tr的操作对象中出现3或者4都会被替换为c。

使用-t可以先截断SET1比SET2中长的字符，例如上面截断多余的4，SET1=[123]和SET2=[abc]就实现了完全对应。

[[email protected] tmp]# cat x.txt

NO Name SubjectID Mark 备注

1  longshuai 001  56 不及格

2  gaoxiaofang  001 60 及格

3  zhangsan 001 50 不及格

4  lisi    001   80 及格

5  wangwu   001   90 及格

[[email protected] tmp]# cat x.txt | tr  "fang" "jin"   ç结果中n和g都被替换为了n

NO Nime SubjectID Mirk 备注

1  lonnshuii 001  56 不及格

2  nioxiiojinn  001 60 及格

3  zhinnsin 001 50 不及格

4  lisi    001   80 及格

5  winnwu   001   90 及格

[[email protected] tmp]# cat x.txt | tr  -t "fang" "jin"  çg被截断，只对应替换fan为jin

NO Nime SubjectID Mirk 备注

1  longshuii 001  56 不及格

2  gioxiiojing  001 60 及格

3  zhingsin 001 50 不及格

4  lisi    001   80 及格

5  wingwu   001   90 及格

2.5.3 压缩符号

这功能太爽了。

tr -s [SET1] [SET2]

它可以将指定的连续的SET1的第一个符号压缩并替换为SET2中的第一个，如果不指定SET2就仅仅只压缩。这样可以使结果变得具有固定的格式，传递给其他命令进行文本处理时就方便太多了。

假如x.txt文件中的内容如下，空格有的地方多，有的地方少，也就是说是一个没有格式的文件。

[[email protected] tmp]# cat x.txt

NO Name SubjectID Mark 备注

1  longshuai 001  56 不及格

2  gaoxiaofang  001 60 及格

3  zhangsan 001 50 不及格

4  lisi    001   80 及格

5  wangwu   001   90 及格

使用tr压缩空格使其变的规则。

[[email protected] tmp]# cat x.txt | tr -s “" "

NO Name SubjectID Mark 备注

1 longshuai 001 56 不及格

2 gaoxiaofang 001 60 及格

3 zhangsan 001 50 不及格

4 lisi 001 80 及格

5 wangwu 001 90 及格

如果指定SET2，假如替换为-。

[[email protected] tmp]# cat x.txt | tr -s " " "-"

NO-Name-SubjectID-Mark-备注

1-longshuai-001-56-不及格

2-gaoxiaofang-001-60-及格

3-zhangsan-001-50-不及格

4-lisi-001-80-及格

5-wangwu-001-90-及格

如果指定的SET1或SET2超过1个字符，则两者都只取第一个字符。例如x.txt中的Mark列有两个连续的0，将其替换为a。

[[email protected] tmp]# cat x.txt | tr -s “"00" "aa"

NO Name SubjectID Mark 备注

1  longshuai a1  56 不及格

2  gaoxiaofang  a1 6a 及格

3  zhangsan a1 5a 不及格

4  lisi    a1   8a 及格

5  wangwu   a1   9a 及格

2.5.4 删除符号和补集

tr -d是删除指定的符号，只能接一个SET1。

[[email protected] tmp]# cat x.txt | tr -d " "

NONameSubjectIDMark备注

1longshuai00156不及格

2gaoxiaofang00160及格

3zhangsan00150不及格

4lisi00180及格

5wangwu00190及格

tr -c SET1 SET2是求tr操作对象对SET1的补集，然后将补集字符全部替换为SET2。即将tr操作对象中不在SET1中存在的字符替换为SET2的字符。但是SET2如果指定的字符大于1个，则只取最后一个字符作为替换字符。使用-c的时候应该把-c SET1作为一个整体，不要将其分开。

例如：

[[email protected] tmp]# echo "abcdefo"| tr -c "ao" "y"

ayyyyyoy[[email protected] tmp]#

上面的是把“abcdefo”除ao的替换为y，即ayyyyyo，但是结果的最后面多了一个y并且紧接着命令提示符。这是因为abcdefo尾部的\\n也是ao的补集的一部分，并将其替换为y了。如果不想替换最后的\\n，可以在SET1中指定\\n。

[[email protected] tmp]# echo "abcdefo"| tr -c "ao\\n" "y"                 

ayyyyyo

如果SET2指定多个字符，将只取最后一个字符作为替换字符。

[[email protected] tmp]# echo "abcdefo"| tr -c "ao\\n" "ay"

ayyyyyo

[[email protected] tmp]# echo "abcdefo"| tr -c "ao\\n" "yb"

abbbbbo

-c常和-d一起使用，tr -d -c SET1。它先执行-c SET1求出tr操作对象对SET1的补集，再对这个补集执行删除，也就是说最终的结果是SET1类的。注意，-d一定是放在-c前面的，否则执行的就不是删除补集，而是替换补集为-d的最后一个字符d了。

[[email protected] tmp]# echo "one 1 two 2 three 3"| tr -d -c "[0-9]\\n"      ç对数字和分行符求补集，并删除这些补集符号

123

[[email protected] tmp]# echo "one 1 two 2 three 3"| tr -d -c "[0-9] \\n"     ç多对一个空格求补集，这样结果中就保留空格了

 1  2  3

[[email protected] tmp]# echo "one 1 two 2 three 3"| tr -c "[0-9]\\n" -d      ç -d选项放在-c选项的后面是替换行为

dddd1ddddd2ddddddd3

[[email protected] tmp]# echo "one 1 two 2 three 3"| tr -d -c "[a-zA-z]\\n"   ç保留字母

onetwothree

[[email protected] tmp]# echo "one 1 two 2 three 3"| tr -d -c "[a-zA-z] \\n"  ç保留字母的同时保留空格

one  two  three

从上面补集的实验中可以看到，其实指定的[0-9]和[a-z]是一个类，最终的结果显示的是这个类中的对象。

在tr中可以使用以下几种类。这些类也可以用在其他某些命令中。

[:alnum:]所有的数字和字母

[:alpha:]所有的字母

[:blank:]所有水平空白=空格+tab

[:cntrl:]所有控制字符（非打印字符），在ascii表中的0-37对应的字符和127的del

[:digit:]所有数字

[:graph:]所有打印字符，不包含空格=数字+字母+标点

[:lower:]所有小写字母

[:print:]所有打印字符，包含空格=数字+字母+标点+空格

[:punct:]所有标点符号

[:space:]所有水平或垂直空白=空格+tab+分行符+垂直tab+分页符+回车键

[:upper:]所有大写字母

[:xdigit:]所有十六进制数字

使用方法例如下面的。例如[:upper:]等价于[A-Z]，[:digit:]等价于[0-9]。

[[email protected] tmp]# echo "one ONE 1 two TWO 2 three THREE 3" | tr -d -c "[:upper:] \\n"

 ONE   TWO   THREE

[[email protected] tmp]# echo "one ONE 1 two TWO 2 three THREE 3" | tr -d -c "[:alpha:] \\n"    

one ONE  two TWO  three THREE

[[email protected] tmp]# echo "one ONE 1 two TWO 2 three THREE 3" | tr -d -c "[:digit:] \\n"    

  1   2   3