朗科实习期间心得笔记

Posted 2020-10-14

bash多命令执行方法：
  1.命令替换
    COMMAND1  $（COMMAND2）
  2.管道
    COMMAND1  |   COMMAND2  |  COMMAND3  ....
  3.顺序执行结构
    COMMAND1 ； COMMAND2 ； COMMAND3 ...
  4.选择执行结构
    如果。。。那么。。。
    要么。。。要么。。。
    逻辑运算：
      与：逻辑乘法，1代表真，0代表假，符号为：&&    双目操作符（必须要有两个参数参与运算）
        1 && 1  =1   其他结果为0
        “与”运算的短路运算法则；只要第一个操作数为false，则其逻辑运算结果一定为false；
      或：逻辑加法，1代表真，0代表假   符号为：||  双目操作符（必须要有两个参数参与运算）
        1 || 1 = 1
        1 || 0 = 1
        0 || 0 = 0
         “或”运算的短路运算法则；只要第一个操作数为true，则其逻辑运算结果一定为true；
      非：逻辑取反， 1表示真，0表示假；  ！  单目操作符（只能作用于一个参数）



    命令执行的状态返回值：
      成功success：0---true
      失败failure：1-255--false



      COMMAND1  &&  COMMAND2
      表示：如果COMMAND1能够成功执行，那么将会执行COMMAND2；如果COMMAND1执行失败，COMMAND2将不会被执行；
      
      COMMAND1  ||  COMMAND2
      表示：如果COMMAND1能够执行，那么COMMAND2不会被执行；如果COMMAND1执行失败，则COMMAND将会被执行；
     
     ！COMMAND1  &&  COMMAND2   相当于   COMMAND1  ||  COMMAND2
     ！COMMAND1  ||  COMMAND2   相当于   COMMAND1  &&  COMMAND2
    
     ！（A  &&  B） = !A  ||  !B
     !  (A  ||  B)  = !A  &&  !B


     三种逻辑运算的优先级：  ！ > && > ||



  示例；
    如果用户user存在并且其家目录也存在，那么执行userdel -r  user命令；
    id user && ls -d /home/user &&  userdel  -r  user




bash脚本编程：
 什么叫编程？
   使用人类自然语言或机器语言进行程序源代码书写的过程。
 为什么要编程？
   为了能够让用户在使用计算机的时候，可以让计算机以非交互的方式完成某些任务；此时用户需要将此类任务编辑成一个文件，并且让计算机按照特定的顺序进行任务读取，从而实现预期的功能；

   为了让计算机能够解读此类文件的内容并正确的予以执行，我们必须将程序源代码文件转换为计算机可以直接识别并使用的二进制格式，此转换过程称为编译；而想要完成编译过程必须使用特定的编译器工具；因此，无论使用何种编程语言进行程序编写，都必须严格按照编译器所能够识别的特定格式和语法结构进行程序编写；

   编程语言：
     高级语言：
       根据源代码处理方式分类：
         编译型语言：
           源代码-->编译器（编译）-->[链接器（链接）]-->汇编器（汇编）-->可以执行的二进制代码文件
         解释型语言：
           源代码-->解释器（逐行解释）-->边解释边执行
       根据编程过程中的功能实现是调用库还是调用外部程序文件分类：
         完整编程语言：
           利用库或编程组件进行编程；
         脚本编程语言：
           利用解释器调用被选择的外部应用程序；

       根据程序的编写规范分类：
         过程式语言：
           程序=指令+数据
           以指令为中心，围绕着指令的功能实现设计数据和数据结构，数据为指令服务；
           算法和指令的实现形式：
             顺序执行
             选择执行
             循环执行
         面向对象语言：
           程序=算法+数据结构
           以数据和数据结构为中心，将数据实例化，围绕数据的需求来部署算法；
             类（class）：被实例化的数据
             属性（attibution）：同一类中的不同对象的区分依据；
             方法（method）：类的正确操作方法；

     低级语言：
       汇编语言：

     机器语言：二进制语言



shell脚本编程---bash脚本编程


  过程式编程语言，解释运行的编程语言，脚本类语言（依靠外部应用程序文件运行）

shell脚本到底是什么？
 1.纯文本文档--文件中所有存储或包含的指令+数据都是以字符为单位进行存储的；
 2.根据用户需求来解决用户问题的简单或复杂的命令组合体；
 3.是一种具有“执行幂等性”的程序实体；
   执行幂等性：任何命令的一次执行结果和多次执行结果是一致的；

   注意：很多命令都不具备“执行幂等性”，因此在shell脚本中需要使用大量的程序逻辑来判断某个命令是否符合其运行条件，从而避免在运行过程中出现的严重错误；


shell脚本中的代码内容如何书写？
 1.首行必须是shebang，即：解释器程序的绝对路径，必须占据绝对行首，切必须单独占据第一行；在执行脚本时，会根据shebang的指示启动相应的解释器以解释脚本内诸多的命令；
   #！/bin/bash
   #！/bin/sh
   ....
 2.在shell脚本中除了shebang之外所有行首为#的行均被解释为注释行；即：解释器只会解释其内容，但并不执行；
 3.解释器会忽略脚本文件中所有的空白行；空白行指的是：在一行文本中，除了空白字符、空格字符、制表字符之外不具备任何类型字符的行；
 4.大量的命令和关键字
   命令：内部或外部应用程序
   关键字：内置于shell，只能在某种特定结构体中执行的命令；keyword；
     如：if，else，then，do，while，for，select，until，case，fi，esac，....
 5.shell中的所有的特殊功能字符；

   注意：所有被编写进shell脚本文档的命令、关键字及符号必须是ASCII编码格式的字符；其他编码格式的字符可以出现在shell脚本中，但不具有任何特殊含义；



如何编写shell脚本？
   可以利用所有的文本文档编辑工具进行shell脚本编写，如：nano，vi，vim，pico，emacs，...
       通常在linux的各发行版本中，推荐使用vim；

脚本文件的命名方式：
  一般情况下，会为脚本设置“.sh”的名称后缀；较低版本的编辑工具，会根据文件的后缀名称识别是否为shell脚本文件；较高版本的文本编辑工具，如：vim7，无需过多关心文件后缀名问题；


脚本的运行方式：
 1.为脚本文件赋予执行权限，可以直接以绝对路径或相对路径的方式来运行此文件；
   # chmod  +x  /PATH/TO/SOME_SCRIPT_FILE
   # /PATH/TO/SOME_SCRIPT_FILE


   注意：如果脚本文件所在目录路径存储与PATH变量中，则直接以脚本文件名来执行即可；

 2.直接使用解释器运行脚本，将脚本文件作为解释器程序的参数；
  # bash /PATH/TO/SOME_SCRIPT_FILE

  bash命令常用选项：
    -x：使bash再解释脚本的过程展示在标准输出上；一般用于为shell脚本排错；
    -n：对于脚本文件进行预执行，以分析脚本中是否存在语法类错误；如果没有错误，则不输出任何信息；相反则输出一些简洁的提示性信息；具体的错误定位还要自行判断；

  注意：此种方式中，脚本文件是否有执行权限并不是很重要的属性；



注意：以上两种方式，在执行脚本时，会在当前shell中开启一个新的子shell运行脚本；一般情况下，当脚本运行结束，该子shell也会随之销毁；因此，所有在脚本中定义的变量，在脚本的末尾处，最好将其明确的撤销；

3.使用source命令运行脚本：
  # source /PATH/TO/SOME_SCRIPT_FILE
  #  .  /PATH/TO/SOME_SCRIPT_FILE
    注意：
      1.source命令不会在运行脚本时开启子shell，而是在当前shell中运行；
      2.使用source命令执行的脚本中不要包括如：exit类的命令；


练习：写一个脚本
  当alex不存在时，创建之，如果成功创建，则显示成功创建的提示信息，否则显示用户已存在；
  #!/bin/bash
  #
  !id alex  &> /dev/null   &&   useradd   alex   &&   echo  "creat  finished"  ||    "user  alex   exists  already"





利用bash脚本程序实现算术运算：

算术运算操作符：
  常用的基本算术运算符：
    +，-，*，/，%，**
  增强型的算术运算符：
    +=，-=，*=，/=，%=
  特殊的增强型算术运算符：
    ++，--

算术运算方法：
  1.$[expression]
    其中的表达式可以是纯数字组成，也可以使用变量引用变量值；在使用变量时，可以将$省略；
    示例：
      #NUM1=1
      #NUM2=4
      #echo  $[NUM1+NUM2]

  2.let VAR=EXPRESSION
   根据算术表达式完成算术运算并赋值给指定的变量；

  3.$（（EXPRESSION））
   效果同方法一

  4.expr命令
   expr  参数1  参数2  参数3
   其中参数1和参数3必须是整数数值；参数2是算是运算符；


  5.echo “表达式”  |   bc


  6.bc  <<<  表达式（scale=？表示小数点后精度）
  eg： bc <<<"scale=3,35/9"





文本处理工具：
  全屏编辑器：vim，nano
  行编辑器：
    文本处理三剑客：grep系，sed，awk
    grep系：grep，egrep，fgrep，文本搜索工具；基于PATTERN（模式）对于给定的文本文件进行模糊搜索，greb系所有命令默认工作与贪婪搜索模式；

    sed：stream editor，流编辑器，文本编辑工具；

    awk：文本格式化工具，文件报告生成器，文件处理的编程语言；



    grep系：
      grep：global  search  regular expression  and  print   out   the  line
       利用正则表达式进行全局搜索并将匹配到的行显示出来；
        grep [options] PATTERN [FILE...]
        grep [options] [-e PATTERN | -f FILE] [FILE...]

        PATTERN：过滤匹配条件，由没有特殊意义的文本字符或者正则表达式元字符组成；

  正则表达式元字符：会被正则表达式处理引擎解释为特殊含义的字符；

  pcre：正则表达式引擎，prel语言的正则表达式引擎；


  正则表达式元字符：
    基本的正则表达式元字符：BRE
      字符匹配类：
        .：可以匹配任意单个字符
        []:匹配任意指定范围内的单个字符
        [^]:匹配任意指定范围以外的单个字符
          下列所有的字符集都可以放置于[]之中用于匹配字符集范围内的单个字符；
            [:lower:]：所有的小写字母
            [:upper:]：所有的大写字母
            [:alpha:]：所有字母，包括大小写
            [:digit:]：所有单个的十进制数字
            [:alnum:]：所有的字母和十进制数字
            [:punct:]：所有的符号
            [:space:]：表示空白字符，包括空格和制表符；
            [a-z]:仅表示小写字母
            [A-Z]:仅表示所有大写字母
            [0-9]:仅表示所有十进制数

      次数匹配类：该字符前面的一个字符可以出现的次数；
          *：其前面的字符可以出现任意次，即：0次，1次或多次
          \？：其前面的字符可有可无，即：0次或1次；
          \+：其前面的字符至少出现一次；
          \{m，n\}：其前面的字符至少出现m次，最多不超过n次；
          \{m\}：其前面的字符必须出现m次；
          \{m,\}:其前面的字符至少出现m次；无上限；
          \{,n\}:其前面的字符出现做多不超过n次；可没有；

          注意：在正则表达式中，表示任意长度的任意字符：.*


      位置锚定字符：
        行锚定：
          行首锚定：^
          行尾锚定：$
        字锚定：
          字首锚定：\<或\b
          字尾锚定：\>或\b


      分组与前向引用字符：
        \(\):将小括号中包含的内容作为一个不可分割的整体来处理；
        \1,\2,\3...:前向引用字符
          正则表达式处理引擎的内置变量，\1表示前面所出现的第一组小括号中所阔选的内容；\2表示前面出现的第二组小括号中阔选的内容，以此类推；


       或者：
         \|:将其左右的字符或字符串当作整体对待；





    grep命令：




    扩展的正则表达式元字符：ERE
            字符匹配类：
                .：匹配任意单个字符；
                []：匹配任意指定范围内的单个字符；
                [^]：匹配任意指定范围以外的单个字符；
                    下列所有的字符集都可以放置于[]之中用于匹配字符集范围内的单个字符：
                      [:lower:]：所有的小写字母
                      [:upper:]：所有的大写字母
                      [:alpha:]：所有字母，包括大小写
                      [:digit:]：所有单个的十进制数字
                      [:alnum:]：所有的字母和十进制数字
                      [:punct:]：所有的符号
                      [:space:]：表示空白字符，包括空格和制表符；
                      [a-z]:仅表示小写字母
                      [A-Z]:仅表示所有大写字母
                      [0-9]:仅表示所有十进制数                       

                      [a-z]：仅表示所有的小写字母
                      [A-Z]：仅表示所有的大写字母
                      [0-9]：仅表示所有的十进制数码

            次数匹配类：该类字符前面的一个字符可以出现的次数；
                *：其前面的字符可以出现任意次，即：0次，1次或多次；
                ?：其前面的字符可有可无，即：0次或1次；
                +：其前面的字符至少出现一次；
                {m,n}：其前面的字符至少出现m次，最多不超过n次；
                {m}：其前面的字符必须出现m次；
                {m,}：其前面的字符至少出现m次；
                {,n}：其前面的字符出现至少出现0次，最多不超n次；

                注意：在正则表达式中，表示任意长度的任意字符：.*

            位置锚定字符：
                行锚定：
                    行首锚定：^
                    行尾锚定：$
                字锚定：
                    字首锚定：\<或\b
                    字尾锚定：\>或\b

            分组与前向引用字符：
                ()：将小括号中包含的内容作为一个不可分割的整体来处理；
                \1, \2, \3,...：前向引用
                    正则表达式处理引擎的内置变量，\1表示前面所出现的第一组小括号中括选的内容；\2表示前面所出现的第二组小括号中括选的内容；...

                    (string1(string2))： \1表示string1，\2表示string2；
                    (string1).*(string2)：\1表示string1，\2表示string2；

            或者：
                |：将其左右的字符或字符串当做整体对待；
                "C|cat"  C  cat        










grep系：
  grep：仅支持基本正则表达式元字符
  egrep：可以支持扩展正则表达式元字符
  fgrep：不支持任何形式的正则表达式元字符，将所有字符都视为没有任何特殊意义的普通文本字符；


  常用选项：
    -A  NUM：同时显示被PATTERN匹配到的行及其后续NUM行；
    -B  NUM:同时显示被PATTERN匹配到的行及其前面NUM行；
    -C  NUM:同时显示被PATTERN匹配到的行及其前后各NUM行；
    --colour[=WHEN]：whend= always，never，auto（自动）；以高亮颜色显示被匹配到的内容；
    -c，--count：不输出被PATTERN匹配的行的内容，而是输出被PATTERN匹配到的行数；
    -E：可以使grep命令支持扩展正则表达式元字符；相当于执行了egrep；
    -F：相当于fgrep；
    -e：指定多个PATTERN在一个命令行中生效；
    -f：从指定的文件中读取多个PATTERN用于一次搜索；
    -i：忽略字符大小写
    -o：仅显示被PATTERN匹配到的部分，关闭贪婪模式；
    -q：安静模式，相当于 grep > /dev/null
    -v：显示没有被PATTERN匹配到的行；