shell 编程 之 小技巧

Posted 2020-10-05

1 概述

本文将通过介绍shell脚本编程过程中常用的一些命令，来提高shell脚本编程的灵活性，以及高效实现编程结果

分别介绍了以下10个工具

shift,select,信号捕捉，数组，字符串处理，定义变量，eval,间接变量引用，mktemp,install

2 shift 控制循环

shift [n]

n 用于将参量列表list 左移指定次数，缺省为左移一次。

参量列表list 一旦被移动，最左端的那个参数就从列表中删除。while 循环遍历位置参量列表时，常用到shift

运行  ./Tshift.sh a b c d 可以看到每次循环$1的值都不一样，而且依次向左移动，参数的个数也不一样

脚本如下:

until  (($#==0));do
echo "\$1 is $1"
echo "var num \$# is $#"
shift
done

3 select循环与菜单

语法如下

select variable in list

do

循环体命令

done

select 循环主要用于创建菜单，按数字顺序排列的菜单项将显示在标准错误上，并显示PS3 提示符，等待用户输入

用户输入菜单列表中的某个数字，执行相应的命令

用户输入被保存在内置变量REPLY 中

select 是个无限循环，因此要记住用break 命令退出循环，或用exit 命令终止脚本。也可以按ctrl+c 退出循环

select 经常和case 联合使用

与for 循环类似，可以省略in list，此时使用位置参量

脚本如下

注意，如果把注释的#select menu in [email protected]这句话启用，就注释掉菜单那一句，并且执行的时候，要带上参数。

PS3="please input your choice: "
select menu in well job hello world bye;
#select menu in [email protected];
do
case $menu in
well)
echo "You have done well"
;;
job)
echo "Nice job"
;;
hello)
echo "hello world"
;;
world)
echo "work hard"
;;
bye)
echo "See U tomorrow"
break
;;
*)
echo "Please re-input"
;;
esac
done

4 信号捕捉

trap ‘触发指令‘ 信号：自定义进程收到系统发出的指定信号后，将执行触发指令，而不会执行原操作

trap ‘‘ 信号：忽略信号的操作

trap ‘-‘ 信号：恢复原信号的操作

trap -p：列出自定义信号操作

通过执行以下的脚本可以看出效果，ctrl + c 操作时sigint信号

SIGKILL 这个信号不能被捕捉，即-9捕捉不了

测试

当第一个循环的时候，执行kill -2 pid，此时是2信号被忽略，按ctrl+c，脚本不会结束

进入第二个循环前，已经恢复了2的默认信号

在第二个循环的时候，按ctrl+c，脚本结束运行，退出状态码是130.被中断退出。

在第三个循环的时候，自定义了2信号，按ctl+c 或者执行kill -2 pid会打印now catch int 2这句话，同时退出状态码是88

trap ‘‘ int
echo "pid is $$"
echo "now 1 diy trap signal"
trap -p
i=1
while [ $i -lt 5 ]
do
sleep 5
echo now i is $i
let i++
done
trap ‘-‘ int
echo "now 2 diy trap signal"
trap -p
j=1
while [ $j -lt 5 ];do
echo j is $j
let j++
sleep 2
done
trap "echo now catch int 2;exit 88" 2
echo "now 3 diy trap signal"
trap -p
m=1
while [ $m -lt 5 ];do
echo m is $m
let m++
sleep 3
done
echo now $0 done

5 数组

数组可以理解成多个变量的集合，当定义的变量含有多个元素，建议用数组，比较方便

变量：存储单个元素的内存空间

数组：存储多个元素的连续的内存空间，相当于多个变量的集合

数组名和索引

索引：编号从0开始，属于数值索引

注意：索引可支持使用自定义的格式，而不仅是数值格式，即为关联索引，bash4.0版本之后开始支持

bash的数组支持稀疏格式（索引不连续）

声明数组：

declare -a ARRAY_NAME

declare -A ARRAY_NAME

-a定义的是普通的数值，也叫下标数组，下标数组元素是通过数组下标（数组下标可以是算术表达式，其结果必须是一个整数）来访问的，但是这种访问方式在表达某些关联性很强的数据时会存在限制。

-A定义的是关联数组，使用任意的字符串作为下标（不必是整数）来访问数组元素，关联数组的下标和值称为键值对，它们是一一对应的关系。在关联数组中，键是唯一的，值可以不唯一。

shell 的关联数组和 shell 的下标数组在定义和使用上完全一样，只是在索引上有区别。

注意：两者不可相互转换，在使用关联数组之前，需要使用命令 declare -A array 进行显示声明。默认数组定义是-a

5.1 数组赋值

数组元素的赋值

注意，如果定义重复名称的数组，则原来数值的所有值都会被覆盖

只有一次只赋值一个元素，这个定义方式不会覆盖掉整个数组，其他三个方式都会覆盖所有的数组

(1) 一次只赋值一个元素，这个定义方式不会覆盖掉整个数组

ARRAY_NAME[INDEX]=VALUE

weekdays[0]="Sunday"

weekdays[4]="Thursday"

(2) 一次赋值全部元素

ARRAY_NAME=("VAL1" "VAL2" "VAL3" ...)

(3) 只赋值特定元素

ARRAY_NAME=([0]="VAL1" [3]="VAL2" ...)

(4) 交互式数组值对赋值

read -a ARRAY，然后输入参数，用空格隔开，数组定义完成后按enter结束对ARRAY数组的定义

5.2 引用数组

引用数组元素：

${ARRAY_NAME[INDEX]}

注意：省略[INDEX]表示引用下标为0的元素

引用数组所有元素：

${ARRAY_NAME[*]}

${ARRAY_NAME[@]}

数组的长度(数组中元素的个数)：

${#ARRAY_NAME[*]}

${#ARRAY_NAME[@]}

删除数组中的某元素：导致稀疏格式

unset ARRAY[INDEX]

如unset sunny[2]

删除整个数组：

unset ARRAY

  查看所有数组

显示所有普通数组：declare -a

  显示所有关联数组：declare -A

5.3数组数据处理

引用数组中的元素：

数组切片：${ARRAY[@]:offset:number}

offset: 要跳过的元素个数

number: 要取出的元素个数

如： declare -a weekday=‘([0]="Sun" [1]="Mon" [2]="Tue" [3]="Wen" [4]="Thu")‘

   echo $[weekday[@]:2:2]

   结果是Tue Wen

取偏移量之后的所有元素${ARRAY[@]:offset}

向数组中追加元素：

ARRAY[${#ARRAY[*]}]=value

关联数组：

declare -A ARRAY_NAME ARRAY_NAME=([idx_name1]=‘val1‘ [idx_name2]=‘val2‘...)

5.4 例子

以下两个例子

ex1 找出10个99以内的随机数的最大值和最小值

ex2 计算/var/log/*.log下所有下标是偶数的文件的行数的总和

注意ex2 中

files=(/var/log/*.log)

直接给数组分配了值，用来通配符的写法

#ex1: to find max and min num in ten nums
declare -a rand
declare -i max=0
declare -i min=32767
for i in {0..9} ; do
    rand[$i]=$[$RANDOM%99]
    echo rand[$i]=${rand[$i]}
    [ ${rand[$i]} -gt $max ] && max=${rand[$i]}
    [ ${rand[$i]} -lt $min ] && min=${rand[$i]}
done
echo "MAX:$max min:$min"


#ex2:to sum the lines in /var/log/*.log which subscript is even num
declare -a files
files=(/var/log/*.log)
declare -i lines=0
for i in $(seq 0 $[${#files[*]}-1]);do
   if [ $[$i%2] -eq 0 ];then
       let lines+=$(wc -l ${files[$i]} | cut -d " "  -f1)
   fi
done

echo "total lines is $lines"

6 字符串处理

6.1 字符串切片

${var:offset}:返回字符串变量var中从第offset个字符后（不包括第offset个字符）的字符开始，到最后的部分，offset的取值在0 到${#var}-1 之间(bash4.2后，允许为负值)

${var:offset:number}：返回字符串变量var中从第offset个字符后（不包括第offset个字符）的字符开始，长度为number的部分

${var:  -length}：取字符串的最右侧几个字符，相当于取最右边

注意：冒号后必须有一空白字符

${var:offset:-length}：从最左侧跳过offset字符，一直向右取到距离最右侧lengh个字符之前的内容，相当于取中间

${var: -length:-offset}：先从最右侧向左取到length个字符开始，再向右取到距离最右侧offset个字符之间的内容，先截断一部分，再取截断后的前面部分

注意：-length前空格

6.2基于模式取子串

${var#*word}：其中word可以是指定的任意字符

功能：自左而右，查找var变量所存储的字符串中，第一次出现的word, 删除字符串开头至第一次出现word字符之间的所有字符

${var##*word}：同上，贪婪模式，不同的是，删除的是字符串开头至最后一次由word指定的字符之间的所有内容

示例：

file="var/log/messages“

${file#*/}: log/messages

${file##*/}: messages

${var%word*}：其中word可以是指定的任意字符；

功能：自右而左，查找var变量所存储的字符串中，第一次出现的word, 删除字符串最后一个字符向左至第一次出现word字符之间的所有字符；

file="/var/log/messages"

${file%/*}: /var/log

${var%%word*}：同上，只不过删除字符串最右侧的字符向左至最后一次出现word字符之间的所有字符；

示例：

url=http://www.magedu.com:80

${url##*:}80

${url%%:*}http

6.3查找替换

${var/pattern/substr}：查找var所表示的字符串中，第一次被pattern所匹配到的字符串，以substr替换之

${var//pattern/substr}: 查找var所表示的字符串中，所有能被pattern所匹配到的字符串，以substr替换之

${var/#pattern/substr}：查找var所表示的字符串中，行首被pattern所匹配到的字符串，以substr替换之

${var/%pattern/substr}：查找var所表示的字符串中，行尾被pattern所匹配到的字符串，以substr替换之

6.4查找并删除

${var/pattern}：删除var所表示的字符串中第一次被pattern所匹配到的字符串

${var//pattern}：删除var所表示的字符串中所有被pattern所匹配到的字符串

${var/#pattern}：删除var所表示的字符串中所有以pattern为行首所匹配到的字符串

${var/%pattern}：删除var所表示的字符串中所有以pattern为行尾所匹配到的字符串

6.5字符大小写转换

${var^^}：把var中的所有小写字母转换为大写

${var,,}：把var中的所有大写字母转换为小写

6.6变量赋值

变量赋值还有以下的写法

以- 减号为标准来看

-当旧变量没有赋值时，新变量为赋值的值

-当旧变量已经有赋值了，新变量就和就变量一样，包括旧变量赋值为空字符串

:-区别就在旧变量为空字符串，新的变量就是赋值的值

其他一样

以- 减号为标准来看

多了:冒号一般就是强制的赋值，作用于当旧变量已经赋予空字符串的时候

-当旧变量没有赋值时，新变量为赋值的值

-当旧变量已经有赋值了，新变量就和就变量一样，包括旧变量赋值为空字符串

:-区别就在旧变量为空字符串，新的变量就是赋值的值

其他一样

+加号特殊，刚好和-减号大概相反的功能

等号和减号差不多，但是，等号会把旧的变量在没有设定的情况下，会把旧的变量也一起赋值，同时，当旧变量是空字符的时候，新变量也是空字符，等号就是，当旧变量没赋值时，新变量为赋值的字段，当旧变量由赋值，等号就是新变量

:=就是旧变量没有赋值时或者空字符时，新旧变量都是赋值的值，但是旧变量由赋值，新变量为旧变量的值。旧变量不变

？比较特殊，会检测旧变量是否存在，旧变量没有赋值，即不存在，就输出错，旧变量已经有赋值，新变量就是旧变量的值，旧变量不变，

:?多了冒号,就是当旧变量也为空字符，也输出错误

7 定义变量类型

Shell变量一般是无类型的，但是bash Shell提供了declare和typeset两个命令用于指定变量的类型，两个命令是等价的

declare [选项] 变量名

-r 声明或显示只读变量

一旦被赋值为只读的变量，那么这个变量将不再被重新赋值或者声明，也不能被取消设置，必须退出当前shell重新登录才能取消变量的赋值或定义

-i将变量定义为整型数

-a 将变量定义为数组

-A 将变量定义为关联数组，下标可以不是数字

-f 显示已定义的所有函数名及其内容

-F 仅显示已定义的所有函数名

-x 声明或显示环境变量和函数

-l 声明变量为小写字母declare –l var=lower

这里会将var这个变量中原来是大写的字母全部转换成小写字母，小写字母不变，var实际被赋予的值不包含大写字母

-u 声明变量为大写字母declare –u var=UPPER

这里会将var这个变量中原来是小写的字母全部转换成大写字母，大写字母不变，var实际被赋予的值不包含小写字母

8 eval命令

eval命令将会首先扫描命令行进行所有的置换，然后再执行该命令。该命令适用于那些一次扫描无法实现其功能的变量.该命令对变量进行两次扫描

示例：

[[email protected]~]# CMD=whoami
[[email protected] ~]# echo $CMD
whoami
[[email protected] ~]# eval $CMD
root
[[email protected]~]# n=10
[[email protected]~]# echo {0..$n}
{0..10}
[[email protected]~]# eval echo {0..$n}
0 1 2 3 4 5 6 7 8 9 10

9 间接变量引用

如果第一个变量的值是第二个变量的名字，从第一个变量引用第二个变量的值就称为间接变量引用

variable1的值是variable2，而variable2又是变量名，variable2的值为value，间接变量引用是指通过variable1获得变量值value的行为

variable1=variable2
variable2=value
tempvar=$variable1

此时tempvar这个变量的值是variable2，但是要实现间接引用，使得tempvar的值通过variable1可以被赋值value,就是所谓的间接引用

bash Shell提供了两种格式实现间接变量引用

花括号里不能有$号，如果要引用花括号里的变量，就要用！感叹号

eval tempvar=\$$variable1
tempvar=${!variable1}

示例：

[[email protected] ~]# N=NAME
[[email protected] ~]# NAME=sunny
[[email protected] ~]# N1=${!N}
[[email protected] ~]# echo $N1
sunny
[[email protected] ~]# eval N2=\$$N
[[email protected] ~]# echo $N2
sunny

10 创建临时文件

mktemp命令：创建并显示临时文件，可避免冲突

mktemp[OPTION]... [TEMPLATE]

TEMPLATE: filename.XXX

X至少要出现三个，为大写的字母X

OPTION：

-d: 创建临时目录

-p DIR或--tmpdir=DIR：指明临时文件所存放目录位置

示例：

mktemp/tmp/test.XXX

tmpdir=`mktemp –d /tmp/testdir.XXX`

创建一个临时目录，同时把这个目录的名称赋值给tmpdir这个变量

mktemp --tmpdir=/testdir test.XXXXXX

11 安装复制文件

install命令的作用是安装或升级软件或备份数据，它的使用权限是所有用户。

install命令和cp命令类似，都可以将文件/目录拷贝到指定的地点。但是，install允许你控制目标文件的属性。

install在拷贝的同时制定新生成文件的属性，如制定rwx或者所属组或者所有者的属性

install通常用于程序的makefile，使用它来将程序拷贝到目标（安装）目录。

install命令：

install [OPTION]... [-T] SOURCE DEST 单文件

install [OPTION]... SOURCE... DIRECTORY

install [OPTION]... -t DIRECTORY SOURCE...

install [OPTION]... -d DIRECTORY...创建空目录

选项：

-m MODE，默认755

-o OWNER

-g GROUP

-d 创建新的目录

更多选项查看链接：http://man.linuxde.net/install

示例：

install -m 700 -o wang -g admins srcfile desfile
install –m 766 –d /testdir/installdir

12 总结

编写脚本的时候，可以借助以上10个工具在来提高编程的效率。

本文出自 “自学linux” 博客，请务必保留此出处http://ghbsunny.blog.51cto.com/7759574/1962589