Linux-标准IO和管道

Posted 2020-10-31

打开的文件都有一个fd：file description（文件描述符）

[[email protected] data]#exec 8<>/data/hosts

[[email protected] data]#ll /proc/$$/fd

total 0

lrwx------. 1 root root 64 Mar 30 14:22 0 -> /dev/pts/3

lrwx------. 1 root root 64 Mar 30 14:22 1 -> /dev/pts/3

lrwx------. 1 root root 64 Mar 30 14:22 2 -> /dev/pts/3

lrwx------. 1 root root 64 Mar 30 16:58 255 -> /dev/pts/3

lrwx------. 1 root root 64 Mar 30 17:17 8 -> /data/hosts

[[email protected] data]#cat /proc/$$/fd/8

127.0.0.1   localhost localhost.localdomain localhost4 localhost4.localdomain4

::1         localhost localhost.localdomain localhost6 localhost6.localdomain6

其实就是软链接

 

Linux给程序提供三种I/O设备

?标准输入（STDIN）－0 默认接受来自键盘的输入

?标准输出（STDOUT）－1 默认输出到终端窗口

?标准错误（STDERR）－2 默认输出到终端窗口

I/O重定向：改变默认位置

 

标准输出重定向：>，或者1>

ls > /dev/pts/5

ls > /data/ls.out

 

标准错误重定向：2>

 

追加不覆盖：>>

 

对的和错的分别重定向

ls /error /data >>/data/f1 2>>/data/f2

 

对的和错的放在一起

ls /error /data >all.log 2>&1

注意次序！

 

新写法：

ls /error /data &>all.log

(ls /error /data 2>&1)>all.log

 

set -C     不允许覆盖，但允许追加

|>          强制覆盖

set+C     允许覆盖

 

/dev/null      垃圾箱，无底洞，不希望输出和保存的数据可导到这里

 

cat 啥都不跟的话会回显，就既有标准输入，又有标准输出

tr命令

tr 转换和删除字符

tr [OPTION]... SET1 [SET2]

选项：

-c -C --complement：取字符集的补集

-d --delete：删除所有属于第一字符集的字符

-s --squeeze-repeats：把连续重复的字符以单独一个字符表示

-t --truncate-set1：将第一个字符集对应字符转化为第二字符集对应的字符[[email protected] data]#tr 'a-z' 'A-Z'

asdf1234

ASDF1234

 

[[email protected] ~]#tr 'a-z' 'A-Z' < anaconda-ks.cfg > /data/log

[[email protected] ~]#cat /data/log

 

[[email protected] doc]#tr -dc 'abc'

23423aabc3sff

aabc

 

[[email protected] doc]#tr -s "abc"

aaabbbacde

abacde

 

[[email protected] data]#hexdump -C win.txt

00000000  61 0d 0a 62 0d 0a 63                              |a..b..c|

00000007

[[email protected] data]#tr -d '\15' < win.txt >win2.txt

[[email protected] data]#hexdump -C win2.txt

00000000  61 0a 62 0a 63                                    |a.b.c|

00000005

[[email protected] data]#tr -d '\r' < win.txt >win3.txt

[[email protected] data]#hexdump -C win3.txt

00000000  61 0a 62 0a 63                                    |a.b.c|

00000005

 

[[email protected] data]#cat win3.txt

a  b     c

[[email protected] data]#tr -s ' ' <win3.txt

a b c

 

[[email protected] data]#df > df.log

[[email protected] data]#tr -s ' ' : < df.log

Filesystem:1K-blocks:Used:Available:Use%:Mounted:on

/dev/sda2:51474912:3405572:45431516:7%:/

devtmpfs:523248:0:523248:0%:/dev

tmpfs:537748:0:537748:0%:/dev/shm

tmpfs:537748:14544:523204:3%:/run

tmpfs:537748:0:537748:0%:/sys/fs/cgroup

/dev/sda1:999320:130824:799684:15%:/boot

/dev/sda3:20511312:45420:19400932:1%:/data

tmpfs:107552:12:107540:1%:/run/user/42

tmpfs:107552:0:107552:0%:/run/user/0

/dev/sr0:8490330:8490330:0:100%:/mnt

 

[[email protected] qjy]#echo abcdef | tr 'abcd' 'xyz'

xyzzef

[[email protected] qjy]#echo abcdef | tr -t 'abcd' 'xyz'

xyzdef

 

多行重定向

mail [-s] "hello" [email protected] << EOF

…

EOF

 

mail [-s] "hello" [email protected] < mail.txt

 

邮件里可用命令，如`hostname`

 

管道

 

cat mail.txt | mail -s 'hello' root

 

| 管道只处理标准输出STDOUT，不处理STDERR，所以要想处理错误信息的话要重定向错误成标准输出：

ls /boot /error 2>&1 | tr 'a-z' 'A-Z'

或新写法：

ls /boot /error |& tr 'a-z' 'A-Z

比较老的系统如RHEL 5.4等可能不支持'

 

例：计算从1+2+..+100

echo {1..100} | tr ' ' + | bc

seq -s + 100 | bc

也可用循环

 

less ：一页一页地查看输入

ls -l /etc | less

mail：通过电子邮件发送输入

       echo "test email" | mail -s "test" [email protected]

lpr：把输入发送给打印机

       echo "test print" | lpr -P printer_name

 

管道中-符号

示例:

将/home里面的文件打包，但打包的数据不是记录到文件，而是传送到stdout，经过管道后，将tar -cvf - /home传送给后面的tar -xvf - ，后面的这个 - 则是取前一个命令的 stdout，因此，就不需要使用临时file了

tar -cvf - /home | tar -xvf -

 

重定向到多个目标（tee）

命令1 | tee [-a ] 文件名 | 命令2

把命令1的STDOUT保存在文件中，做为命令2的输入

-a 追加

使用：

?保存不同阶段的输出

?复杂管道的故障排除

?同时查看和记录输出

 

练习：

1、处理字符串“xt.,l 1 jr#!$mn 2 c*/fe 3 uz 4”，只保留其中的数字和空格

   答：echo 'xt.,l 1 jr#!$mn 2 c*/fe 3 uz 4' | tr -dc 'a-z '

2、将PATH变量每个目录显示在独立的一行

   答：echo $PATH | tr : '\n'

3、将指定文件中0-9分别替代成a-j

   答：tr '0-9' 'a-j' < a.txt > a.txt

4、将文件/etc/centos-release中每个单词（由字母组成）显示在独立的一行，并无空行

   答：[[email protected] ~]#cat /etc/centos-release | tr -dc '[:alpha:] ' | tr -s ' ' '\n'

       CentOS

       Linux

       release

       Core

 

例：创建随机小写字母文件名

[[email protected] data]#touch `openssl rand -base64 12 | tr -dc '[:lower:]'`

 

思考：以下4项哪一项是与众不同的？

A cmd > log 2>&1

B cmd 2>&1 > log

C cmd &> log

D cmd 2>log >&2

答案：B