bash的多命令执行，shell脚本基础及grep系

Posted 2020-10-14

bash的特性之多命令执行的逻辑关系

  1.命令替换

COMMAND1 $(COMMAND2)  ：先执行COMMAND2然后再作为COMMAND1的参数执行COMMAND1

[[email protected] ~]# ls /mnt
a.sh  a.txt
----------------------------------------------------------
[[email protected] mnt]# cat a.sh

echo "你好"
---------------------------------------------------------
[[email protected] mnt]# cat a.txt

useradd xiaoming -c "wang xiaoming" -u 8089 -g 8089
passwd xiaoming -n 5 -x 30 -w 3 -i 7
----------------------------------------------------------- 
[[email protected] ~]# cat $(ls /mnt)

echo "你好"

useradd xiaoming -c "wang xiaoming" -u 8089 -g 8089
passwd xiaoming -n 5 -x 30 -w 3 -i 7

  2.管道

COMMAND1 | COMMAND2 |COMMAND3  ：先执行1，然后再把1的结果作为2的参数执行，再把2的结果给三执行

取出 /etc/passw中的第9，10行

[[email protected] ~]# head -10 /etc/passwd|tail -2
mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
operator:x:11:0:operator:/root:/sbin/nologin

  3.顺序执行结构

  COMMAND1;COMMAN2;COMMAND3... ：

 

[[email protected] ~]# echo -n "1";echo ";2"

1;2

 

  4.选择执行结构

如果...那么....   

要么...要么....

逻辑运算：

  与 ：逻辑乘法  1 --真，0--假 ，&&，双目操作符

1 && 1=1

1 && 0=0

0 && 1=0

0 && 0=0

  "与"运算的断路运算法则 ：只要第一个操作数为false，则其逻辑运算结果一定为false；

   

  或 ：逻辑加法  1--真，0--假， ||,双目操作符

1 || 1 =1

1 || 0 =1

0 || 1 =1

0 || 0 =0

  "或"运算的短路运算法则：只要第一个操作数为true，则其逻辑运算结果一定为ture

    非 ：逻辑取反  1--真，0--假， !,单目操作符

!0=1

!1=0

COMMAND1 && COMMAND2

1.表示如果COMMADN1执行成功，则将会执行COMMAND2

2.表示如果COMMAND2执行失败，则不会执行COMMAND2

COMMAND1 || COMMAND2

1.只有COMMAND1执行失败，COMMAND2才会被执行

2.如果COMMAND1执行成功，COMMAND2不会被执行

!COMMAND1 && COMMAND2  ==  COMMAND1 || COMMAND2

!COMMAND1 || COMMAND2  ==  COMMAND1 && COMMAND2

   德·摩根定律

!(COMMAND1 && COMMAND2) || COMMAND3

!(COMMAND1 || COMMAND2) && COMMAND3

!(A && B) = !A || !B

!(A || B) = !A && !B

   三种逻辑运算的优先级：

!>&&>||

注意：逻辑运算考虑的是其状态返回值

shell脚本编程--bash脚本编程：

      过程式编程语言，解释运行的编程语言，脚本类语言（依靠外部应用程序文件运行）

shell脚本到底是什么？

1.纯文本文档——文件中所有存储或包含的指令+数据都是以字符为单位进行存储的

2.根据用户的需求来解决用户问题的简单或复杂的命令组合体

3.是一种具有“执行幂等性”的程序实体

执行幂等性：任何命令的一次执行结果和多次执行结果时一致的

   注意：很多命令都不具备"执行幂等性",因此在shell脚本中我们需要使用大量的程序逻辑来判断某个命令是否

 符合其运行条件，从而避免在运行过程中出现的严重错误

shell脚本中的代码内容如何出现？

1.首行必须是shebang，即解释器程序的绝对路径，而且必须占据绝对行首；且必须单独占据第一行，在执行脚本时，

 会根据shebang的指示启动相应的解释器以解释脚本内诸多的命令；

#!/bin/bash

#!/bin/sh

#!/usr/bin/python

#!/usr/bin/per1

.....

2.在shell脚本中除了shebang之外，所有行首为#字符的行均被解释为  注释行；即：解释器只会解释其内容，但不

予以执行

3.解释器会忽略脚本文件中所有的空白行；空白行指的是：在一行文本中除了空白字符，空格字符，制表字符之外

不具备其他任何类型的字符的行

4.大量的命令和关键字

   命令：内部或外部应用程序

   关键字：内置于shell，只能在某种特定结构体中执行的命令；keyword；

  如：if,else,then,do,while,for,select,until,case,fi,esac.....

 5.shell中的所有的特殊功能字符

注意：所有被编写进shell脚本文档的字符必须是ASCLL编码格式的字符，其他编码格式的字符可以出现在shell

     脚本文件中，但不具有任何特殊含义

如何编写shell脚本？

   利用所有的文本文档编辑工具进行shell脚本编写，如：

       nano,vi,vim,pico,emacs,...

       通常在Linux的各种发行版本中推荐使用vim；

脚本文件的命名方式：

   一般情况下：我们会为脚本设置".sh"的名称后缀；较低版本的编辑工具会根据文件的后缀名称来识别是否为shell

   脚本文件；较高版本的文本编辑工具，如vim7，无需过多的关系文件后缀名的问题

脚本的运行方法

1.为脚本文件赋予执行权限，可以直接以绝对路径或相对路径的方式运行此文件；

 #chmod +x /PATH/TO/SOME_SCRIPT_FILE

 #/PATH/TO/SOME_SCRIPT_FILE

注意：如果脚本文件所在目录路径存储于PATH变量中，则直接以脚本文件名执行即可

2.直接使用解释器运行脚本，将脚本文件作为解释器程序的参数

 # bash /PATH/TO/SOME_SCRIPT_FILE

bash命令的常用选项：

-x：使bash在解释脚本的过程展示在标准输出上；一般用于帮shell脚本排错

-n：对脚本文件进行预执行，以分析脚本中是否存在语法错误，如果没有错误，则不输出任何信息；

   相反则输出一些简洁的提示性系；具体的错误定位需要自行判断；

注意：此种方式中，脚本文件是否有执行权限并不是很重要的权限

注意：以上俩种方式，执行脚本时，会在当前shell中开启一个新的子shell以运行脚本；一般情况下，当脚本运行结束，该子

      shell也会被随之销毁；因此所有在脚本中定义的变量，在脚本的末尾处，最好将其明确的撤销。

3.使用source命令运行脚本：

  #source /PATH/TO/SOME_SCRIPT_FILE

  # . /PATH/TO/SOME_SCRIPT_FILE

注意：source命令不会在运行脚本时开启子shell，而是在当前shell中执行；

     使用source命令执行的脚本中不要包括诸如exit类的命令

利用bash脚本实现算数运算：

  算术运算操作符

    常用的基本算数运算符：

+ - * /  %  **

    增强型的算数运算符：

+=  -=  *=  /=  %=

    特殊的增强型算术运算符

++  --

 

创建一个变量wc1，如何区分++wc1  ，wc1++ 和 wc1+=
[[email protected] ~]# wc1=4
[[email protected] ~]# echo "$[wc1++]"
4
[[email protected] ~]# echo $wc1
5
wc1++ ：将wc1输出，然后再让他的值+1

[[email protected] ~]# echo "$[++wc1]"
6
[[email protected] ~]# echo $wc1
6

++wc1，将wc1的值加1然后再输出

[[email protected] ~]# echo "$[wc1+=4]"
10
[[email protected] ~]# echo $wc1
10

wc1+=4 ：将wc1的值加4再赋值给wc1

算术运算方法：

    1.$[expression]

其中的表达式可以是纯数字组成的，也可以使用变量引用变量值；在使用变量时，可以将$符号省略

    

[[email protected] ~]# echo "$[3+4]"
7

    2.let VAR=EXPRESSION

根据算术表达式完成算术运算并赋值给指定的变量

    3.$((EXPRESSION))

其中的表达式可以是纯数字组成的，也可以使用变量引用变量值；在使用变量时，可以将$符号省略

    4.expr ARGU1  ARGU2  ARGU3 

其中ARGU1 和 ARGU3必须是整数数值  ARGU2是算术运算符

    5.echo "EXPRESSION" | bc

    6.bc <<<EXPRESSION

grep系：Global search Regular Expression and Print out the line

利用正则表达式进行全局搜索并将匹配到的行显示出来 

   语法格式：

       grep [options] PATTERN [FILE...]

       grep [options] [-e PATTERN | -f FILE] [FILE...]

       PATTERN：过滤匹配条件，是由没有特殊意义的文本字符或者是正则表达式元字符组成

正则表达式元字符：会被正则表达式处理引擎解释为特殊含义的字符

pcre：正则表达式处理引擎，prel语言的正则表达式引擎

正则表达式的元字符：

基本的正则表达式元字符：BRE

1.字符匹配类：

   .：匹配任意单个字符

  []：匹配任意指定范围内的单个字符

 [^]：匹配任意指定范围外的单个字符

下列所有的字符集都可以放置于[]之中用于匹配字符集范围内的单个字符

[:lower:] [:upper:] [:alpha:] [:digit:] [:xdigit:] [:alnum:] [:punct:] [:space:]

[a-z]:仅表示所有的小写字母

[A-Z]:仅表示所有的大写字母

[0-9]:仅表示所有的十进制数码

2.次数匹配类： 该字符前面的一个字符可以出现的次数

   *:表示前面的字符可以出现任意次，即：0-n

  \?:表示其前面的字符可有可无，即0次 或 1次

      \+:表示其前面的字符至少出现一次

      \{m,n\}:表示其前面的字符至少出现m次，最多不超过n次

      \{m\}:表示其前面的字符必须出现m次

       \{m,\}:表示其前面的字符至少出现m次

       \{,n\}:表示其前面的字符最多不超过n次

注意：在正则表达式中，表示任意长度的任意字符：.*

      3.位置锚定字符

   行锚定：

行首锚定：^

行尾锚定：$

   字锚定：

字首锚定：\<或\b

字尾锚定：\>或\b

4.分组与前向引用字符：

   \(\):把括号内包含的内容作为一个不可分割的整体来处理

     \1，\2,\3,....:前向引用

 正则表达式处理引擎的内置变量，\1表示前面所出现的第一组小括号中扩选的内容；\2表示第二组

 小括号中的内容

       5.\|:将其左右的字符串当做整体来对待

"C\|cat"   匹配 C 或cat

注意：^"C\|cat"不等于匹配 ^C 或 ^cat,而是^C 或cat

常用选项：

扩展的正则表达式元字符：ERE

基本的正则表达式元字符：BRE

1.字符匹配类：

   .：匹配任意单个字符

  []：匹配任意指定范围内的单个字符

 [^]：匹配任意指定范围外的单个字符

下列所有的字符集都可以放置于[]之中用于匹配字符集范围内的单个字符

[:lower:] [:upper:] [:alpha:] [:digit:] [:xdigit:] [:alnum:] [:punct:] [:space:]

[a-z]:仅表示所有的小写字母

[A-Z]:仅表示所有的大写字母

[0-9]:仅表示所有的十进制数码

2.次数匹配类： 该字符前面的一个字符可以出现的次数

   *:表示前面的字符可以出现任意次，即：0-n

   ?:表示其前面的字符可有可无，即0次 或 1次

       +:表示其前面的字符至少出现一次

        {m,n}:表示其前面的字符至少出现m次，最多不超过n次

       {m}:表示其前面的字符必须出现m次

         {m,}:表示其前面的字符至少出现m次

         {,n}:表示其前面的字符最多不超过n次

注意：在正则表达式中，表示任意长度的任意字符：.*

      3.位置锚定字符

   行锚定：

行首锚定：^

行尾锚定：$

   字锚定：

字首锚定：\<或\b

字尾锚定：\>或\b

4.分组与前向引用字符：

    ():把括号内包含的内容作为一个不可分割的整体来处理

     \1，\2,\3,....:前向引用

 正则表达式处理引擎的内置变量，\1表示前面所出现的第一组小括号中扩选的内容；\2表示第二组

 小括号中的内容

       5.|:将其左右的字符串当做整体来对待

"C|cat"   C    或cat

grep系：

grep：仅支持基本正则表达式元字符

egrep：可以支持扩展正则表达式元字符

fgrep：不支持任何形式的正则表达式元字符，把所有的字符视为普通文本字符

常用选项：

-A num :显示被匹配到的行以及其后num行

-B num :显示被匹配到的行以及其前num行

 -C num :显示被匹配到的行及其前后num行

--color[=WHEN]:以高亮颜色来显示被匹配到的内容

-c --count :不显示被匹配的结果，而是输出被匹配到的行数

-E :相当于执行egrep

-F : --fixed-strings :相当于fgrep

-e :指定多个【模式】在一个命令行中生效

-f :从指定的文件中读取多个PATTERN用于一次搜索

-i :--ignore-case 忽略字母大小写

-o :--only-matching：仅显示被PATTERN匹配到的部分，并且分行显示

-q :--quite,--silent:安静模式；相当于grep > /dev/null

-v :--invert-match:显示没有被匹配到的行

注意：字锚定：是锚定没有被特殊符号分隔的一串字符