运维管道和重定向语法

Posted 2021-11-06 duanlinxiao

(1).输出重定向

　　定义：将命令的标准输出结果保存到指定的文件中，而不是直接显示在显示器上。

　　输出重定向使用>和>>操作符。

　　语法：cmd > filename，表示将标准输出写入文件，如果此文件已存在，将覆盖原文件的内容。如果不存在，则新建该文件。

　　　　　cmd >> filename，表示将标准输出追加到文件，如果文件不存在，则新建该文件。

实例1：查看当前主机的CPU类型保存到cpu.txt文件中，而不是直接显示到屏幕上。

1 2 3 4

//如果想要直接查看CPU信息 [[email protected] ~]$ cat /proc/cpuinfo //那么相应的输出重定向如下 [[email protected] ~]$ cat /proc/cpuinfo > cpu.txt

实例2：将内核版本信息追加到cpu.txt

1 2 3 4 5 6 7

//如果想要查看系统基本信息 [[email protected] ~]$ uname -r 3.10.0-957.5.1.el7.x86_64 [[email protected] ~]$ uname -a Linux xuexi 3.10.0-957.5.1.el7.x86_64 #1 SMP Fri Feb 1 14:54:57 UTC 2019 x86_64 x86_64 x86_64 GNU/Linux //那么相应的追加如下 [[email protected] ~]$ uname -a >> cpu.txt

实例3：清空一个文件

1	[[email protected] ~]$ > cpu.txt

(2).输入重定向

 　　定义：将命令中接收输入的途径有默认键盘改为其他文件，而不是等待从键盘输入。

　　输入重定向使用<操作符。

实例：

1 2 3 4 5 6

[[email protected] ~]$ grep root /etc/passwd root:x:0:0:root:/root:/bin/bash operator:x:11:0:operator:/root:/sbin/nologin [[email protected] ~]$ grep root < /etc/passwd root:x:0:0:root:/root:/bin/bash operator:x:11:0:operator:/root:/sbin/nologin

mysql数据库导入数据，格式如下

1	[[email protected] ~]$ mysql -uroot -p123456789 < a.sql

(3).EOF

　　EOF本意是End Of File，表明到了文件末尾。EOF通常与<<结合使用，<<EOF表示后续的输入作为子命令或子shell的输入，知道遇到EOF，再次返回主shell，可将其理解为分界符。既然是分界符，那么形式自然不是固定的，这里可以将EOF进行自定义，但是前后的分界符必须成对出现且不能和shell命令冲突。

 实例1：

1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18

[[email protected] ~]$ cat > a.txt << EOF > This is a file. > EOF [[email protected] ~]$ cat a.txt This is a file. [[email protected] ~]$ cat >> a.txt << EOF > My name is xf. > EOF [[email protected] ~]$ cat a.txt This is a file. My name is xf. [[email protected] ~]$ cat > b.txt << ccc > This is a file. > EOF > ccc [[email protected] ~]$ cat b.txt This is a file. EOF

实例2：在脚本中我们可以通过重定向输入来打印消息菜单。可以自定义。

1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19

[[email protected] ~]$ vim c.sh //文件内容如下 #! /bin/bash   cat << EOF =================================== mysql httpd oracle =================================== EOF //保存退出 [[email protected] ~]$ chmod +x c.sh [[email protected] ~]$ ./c.sh =================================== mysql httpd oracle ===================================

(4).错误重定向

　　定义：将命令执行过程中出现的错误信息（选项或参数错误）保存到指定文件，而不是直接显示到显示器。

　　错误重定向使用2>和2>>操作符（2表示的是标准错误的文件描述符）

　　语法：cmd 2> filename，表示将标准错误写入文件，如果此文件已存在，将覆盖原文件的内容。如果不存在，则新建该文件。

　　　　　cmd 2>> filename，表示将标准错误追加到文件，如果文件不存在，则新建该文件。

　　在实际应用中，错误重定向可以用于收集执行的错误信息，为排错提供依据；对于shell脚本还可以将无关紧要的错误信息重定向到空文件/dev/null，以保持脚本输出的简洁。

实例1：将错误显示的内容与正确显示的内容分开

1 2 3 4 5 6 7 8 9 10 11

[[email protected] ~]$ ls /etc/passwd xxxx ls: 无法访问xxxx: 没有那个文件或目录 /etc/passwd [[email protected] ~]$ ls /etc/passwd xxxx > a.txt ls: 无法访问xxxx: 没有那个文件或目录 [[email protected] ~]$ cat a.txt /etc/passwd [[email protected] ~]$ ls /etc/passwd xxxx 2> a.txt /etc/passwd [[email protected] ~]$ cat a.txt ls: 无法访问xxxx: 没有那个文件或目录

实例2：正确的内容写入一个文件，错误的内容写入另一个文件

1 2 3 4 5

[[email protected] ~]$ ll /etc/passwd xxxx > right.txt 2> err.txt [[email protected] ~]$ cat right.txt -rw-r--r--. 1 root root 2257 2月  13 16:19 /etc/passwd [[email protected] ~]$ cat err.txt ls: 无法访问xxxx: 没有那个文件或目录

(5).null黑洞和zero空文件

　　把/dev/null看做“黑洞”，所有写入它的内容都会永远丢失。而尝试从该文件读取内容也什么都读不到。然而/dev/null对命令行和脚本都非常有用。

 　　/dev/zero在类UNIX操作系统中，是一个特殊的文件，当你读它时，它会提供无限的空字符（NULL，ASCII NUL，0x00）。典型用法是用它来产生一个特定大小的空白文件。

实例1：使用dd命令产生一个50M的空白文件，空白文件可以临时当做设备文件使用

1 2 3 4 5 6 7 8

[[email protected] ~]$ dd if=/dev/zero of=1.txt bs=M count=50 记录了50+0 的读入 记录了50+0 的写出 52428800字节(52 MB)已复制，0.0508383 秒，1.0 GB/秒 [[email protected] ~]$ ll -h 1.txt -rw-rw-r--. 1 xf xf 50M 2月  26 10:17 1.txt [[email protected] ~]$ cat 1.txt [[email protected] ~]$

　　/dev/zero也可以用于清除分区头。

(6).&>和>&符号

　　&表示等同于的意思。除了&>和>&以外还有&>>

实例1：把标准输出与标准错误写入到同一个文件，此实例使用&>和>&有多种写法

1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40

[[email protected] ~]$ ls /tmp xxxx >1.txt 2>&1 [[email protected] ~]$ ls /tmp xxxx 2>2.txt 1>&2 [[email protected] ~]$ ls /tmp xxxx &> 3.txt [[email protected] ~]$ ls /tmp xxxx >& 4.txt [[email protected] ~]$ cat 1.txt ls: 无法访问xxxx: 没有那个文件或目录 /tmp: ssh-2yPDLej8lp2k systemd-private-fb4d19bcb21b4301aa41f11d24a7deab-bolt.service-3sZXoj systemd-private-fb4d19bcb21b4301aa41f11d24a7deab-chronyd.service-rUnYOY systemd-private-fb4d19bcb21b4301aa41f11d24a7deab-colord.service-go7dw4 systemd-private-fb4d19bcb21b4301aa41f11d24a7deab-cups.service-o7nKmx systemd-private-fb4d19bcb21b4301aa41f11d24a7deab-fwupd.service-GN4Clw systemd-private-fb4d19bcb21b4301aa41f11d24a7deab-rtkit-daemon.service-59x6Qx tracker-extract-files.0 tracker-extract-files.1000 VMwareDnD vmware-root_6784-2823359541 vmware-root_6814-2822835244 vmware-root_6819-3879179857 vmware-root_6821-3879048790 vmware-root_6829-3845623896 vmware-root_6834-2865236895 vmware-root_6839-3854340548 vmware-root_6843-3879573071 vmware-root_6844-2831682966 vmware-root_6849-4156467083 vmware-root_6850-3100130775 vmware-root_6851-4148143625 vmware-root_6855-4156336012 vmware-root_6863-4122911106 vmware-root_6874-3099737545 vmware-root_6883-4147619377 vmware-root_6889-4122255805 yum_save_tx.2019-02-21.14-15.ehxi5q.yumtx yum_save_tx.2019-02-25.09-56.0qBBLA.yumtx yum_save_tx.2019-02-26.10-23.gFGrHz.yumtx [[email protected] ~]$ diff 1.txt 2.txt [[email protected] ~]$ diff 1.txt 3.txt [[email protected] ~]$ diff 1.txt 4.txt

实例2：把标准输出与标准错误追加到文件中

1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 54 55 56

[[email protected] ~]$ ll > 1.txt [[email protected] ~]$ cat 1.txt 总用量 0 -rw-rw-r--. 1 xf xf 0 2月  26 13:34 1.txt drwxr-xr-x. 2 xf xf 6 9月   6 11:43 公共 drwxr-xr-x. 2 xf xf 6 9月   6 11:43 模板 drwxr-xr-x. 2 xf xf 6 9月   6 11:43 视频 drwxr-xr-x. 2 xf xf 6 9月   6 11:43 图片 drwxr-xr-x. 2 xf xf 6 9月   6 11:43 文档 drwxr-xr-x. 2 xf xf 6 9月   6 11:43 下载 drwxr-xr-x. 2 xf xf 6 9月   6 11:43 音乐 drwxr-xr-x. 2 xf xf 6 11月 19 13:29 桌面 [[email protected] ~]$ ls /tmp xxxx &>>1.txt [[email protected] ~]$ cat 1.txt 总用量 0 -rw-rw-r--. 1 xf xf 0 2月  26 13:34 1.txt drwxr-xr-x. 2 xf xf 6 9月   6 11:43 公共 drwxr-xr-x. 2 xf xf 6 9月   6 11:43 模板 drwxr-xr-x. 2 xf xf 6 9月   6 11:43 视频 drwxr-xr-x. 2 xf xf 6 9月   6 11:43 图片 drwxr-xr-x. 2 xf xf 6 9月   6 11:43 文档 drwxr-xr-x. 2 xf xf 6 9月   6 11:43 下载 drwxr-xr-x. 2 xf xf 6 9月   6 11:43 音乐 drwxr-xr-x. 2 xf xf 6 11月 19 13:29 桌面 ls: 无法访问xxxx: 没有那个文件或目录 /tmp: ssh-7dArISEgeS0O systemd-private-6596f9db642a46ae9174a8ca3ace2009-bolt.service-UElQVL systemd-private-6596f9db642a46ae9174a8ca3ace2009-chronyd.service-oIQjdt systemd-private-6596f9db642a46ae9174a8ca3ace2009-colord.service-8hFZOp systemd-private-6596f9db642a46ae9174a8ca3ace2009-cups.service-7i8U0x systemd-private-6596f9db642a46ae9174a8ca3ace2009-fwupd.service-SWULra systemd-private-6596f9db642a46ae9174a8ca3ace2009-rtkit-daemon.service-jYXFJl tracker-extract-files.0 tracker-extract-files.1000 VMwareDnD vmware-root_6784-2823359541 vmware-root_6814-2822835244 vmware-root_6819-3879179857 vmware-root_6821-3879048790 vmware-root_6829-3845623896 vmware-root_6834-2865236895 vmware-root_6839-3854340548 vmware-root_6843-3879573071 vmware-root_6844-2831682966 vmware-root_6849-4156467083 vmware-root_6850-3100130775 vmware-root_6851-4148143625 vmware-root_6855-4156336012 vmware-root_6863-4122911106 vmware-root_6874-3099737545 vmware-root_6883-4147619377 vmware-root_6889-4122255805 yum_save_tx.2019-02-21.14-15.ehxi5q.yumtx yum_save_tx.2019-02-25.09-56.0qBBLA.yumtx yum_save_tx.2019-02-26.10-23.gFGrHz.yumtx

实例3：shell脚本中的/dev/null 2>&1是什么意思呢？

1	[[email protected] ~]$ ls /etc/passwd >/dev/null 2>&1

注：将标准输出和标准错误全部重定向到/dev/null中，也就是将产生的所有信息丢弃。

 (7).管道符|的使用

　　语法： command -a | command -b | command -c | ...

注意：1、管道命令只处理前一个命令标准输出，不处理标准错误

　　　2、管道右边的命令，必须是一个能够接收前一个命令的标准输出的数据流的命令才行

　　　3、管道可以把两个命令连起来，它可以连接多个命令使用

实例1：对应注意1

1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36

[[email protected] ~]$ ls /tmp xxxx ls: 无法访问xxxx: 没有那个文件或目录 /tmp: ssh-7dArISEgeS0O systemd-private-6596f9db642a46ae9174a8ca3ace2009-bolt.service-UElQVL systemd-private-6596f9db642a46ae9174a8ca3ace2009-chronyd.service-oIQjdt systemd-private-6596f9db642a46ae9174a8ca3ace2009-colord.service-8hFZOp systemd-private-6596f9db642a46ae9174a8ca3ace2009-cups.service-7i8U0x systemd-private-6596f9db642a46ae9174a8ca3ace2009-fwupd.service-SWULra systemd-private-6596f9db642a46ae9174a8ca3ace2009-rtkit-daemon.service-jYXFJl tracker-extract-files.0 tracker-extract-files.1000 VMwareDnD vmware-root_6784-2823359541 vmware-root_6814-2822835244 vmware-root_6819-3879179857 vmware-root_6821-3879048790 vmware-root_6829-3845623896 vmware-root_6834-2865236895 vmware-root_6839-3854340548 vmware-root_6843-3879573071 vmware-root_6844-2831682966 vmware-root_6849-4156467083 vmware-root_6850-3100130775 vmware-root_6851-4148143625 vmware-root_6855-4156336012 vmware-root_6863-4122911106 vmware-root_6874-3099737545 vmware-root_6883-4147619377 vmware-root_6889-4122255805 yum_save_tx.2019-02-21.14-15.ehxi5q.yumtx yum_save_tx.2019-02-25.09-56.0qBBLA.yumtx yum_save_tx.2019-02-26.10-23.gFGrHz.yumtx [[email protected] ~]$ ls /tmp xxxx | grep /tmp ls: 无法访问xxxx: 没有那个文件或目录　　//可以看到标准错误没有被处理，仍然输出 /tmp:

实例2：对应注意3

1 2 3 4 5

[[email protected] ~]$ ps -aux | grep sshd root       7418  0.0  0.2 112860  4312 ?        Ss   13:19   0:00 /usr/sbin/sshd -D xf        10913  0.0  0.0 112728   988 pts/0    S+   14:39   0:00 grep --color=auto sshd [[email protected] ~]$ ps -aux | grep sshd | grep root root       7418  0.0  0.2 112860  4312 ?        Ss   13:19   0:00 /usr/sbin/sshd -D

(8).tee

tee [选项] [文件]

选项：

1 2 3 4

-a,--append 内容追加到给定的文件而非覆盖 -i,--ignore-interrupts 忽略中断信号 --help 帮助 --version 版本信息

　　将标准输入复制到每个指定文件，并显示到标准输出

实例1：将磁盘使用的信息写入文件

1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20

[[email protected] ~]$ df -h | tee disk.log 文件系统        容量  已用  可用 已用% 挂载点 /dev/sda3        17G  4.7G   13G   28% / devtmpfs        975M     0  975M    0% /dev tmpfs           991M     0  991M    0% /dev/shm tmpfs           991M   11M  980M    2% /run tmpfs           991M     0  991M    0% /sys/fs/cgroup /dev/sr0        4.2G  4.2G     0  100% /mnt /dev/sda1      1014M  276M  739M   28% /boot tmpfs           199M   20K  199M    1% /run/user/1000 [[email protected] ~]$ cat disk.log 文件系统        容量  已用  可用 已用% 挂载点 /dev/sda3        17G  4.7G   13G   28% / devtmpfs        975M     0  975M    0% /dev tmpfs           991M     0  991M    0% /dev/shm tmpfs           991M   11M  980M    2% /run tmpfs           991M     0  991M    0% /sys/fs/cgroup /dev/sr0        4.2G  4.2G     0  100% /mnt /dev/sda1      1014M  276M  739M   28% /boot tmpfs           199M   20K  199M    1% /run/user/1000

实例2：将磁盘使用的信息追加到文件

1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29

[[email protected] ~]$ df -h | tee -a disk.log 文件系统        容量  已用  可用 已用% 挂载点 /dev/sda3        17G  4.7G   13G   28% / devtmpfs        975M     0  975M    0% /dev tmpfs           991M     0  991M    0% /dev/shm tmpfs           991M   11M  980M    2% /run tmpfs           991M     0  991M    0% /sys/fs/cgroup /dev/sr0        4.2G  4.2G     0  100% /mnt /dev/sda1      1014M  276M  739M   28% /boot tmpfs           199M   20K  199M    1% /run/user/1000 [[email protected] ~]$ cat disk.log 文件系统        容量  已用  可用 已用% 挂载点 /dev/sda3        17G  4.7G   13G   28% / devtmpfs        975M     0  975M    0% /dev tmpfs           991M     0  991M    0% /dev/shm tmpfs           991M   11M  980M    2% /run tmpfs           991M     0  991M    0% /sys/fs/cgroup /dev/sr0        4.2G  4.2G     0  100% /mnt /dev/sda1      1014M  276M  739M   28% /boot tmpfs           199M   20K  199M    1% /run/user/1000 文件系统        容量  已用  可用 已用% 挂载点 /dev/sda3        17G  4.7G   13G   28% / devtmpfs        975M     0  975M    0% /dev tmpfs           991M     0  991M    0% /dev/shm tmpfs           991M   11M  980M    2% /run tmpfs           991M     0  991M    0% /sys/fs/cgroup /dev/sr0        4.2G  4.2G     0  100% /mnt /dev/sda1      1014M  276M  739M   28% /boot tmpfs           199M   20K  199M    1% /run/user/1000

注：可以用来记录日志