大数据系列博客之 --- 深入简出 Shell 脚本语言(基础篇)

Posted 房上的猫

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了大数据系列博客之 --- 深入简出 Shell 脚本语言(基础篇)相关的知识,希望对你有一定的参考价值。

 

首先声明,此系列shell系列博客分为四篇发布,分别是:

  基础篇:https://www.cnblogs.com/lsy131479/p/9914747.html

  提升篇:https://www.cnblogs.com/lsy131479/p/9914897.html

  高级篇:https://www.cnblogs.com/lsy131479/p/9914962.html

  面试篇:

 

1. Shell概述

为什么要学习Shell呢?

1需要看懂运维人员编写的Shell程序。

2偶尔会编写一些简单Shell程序来管理集群、提高开发效率

 

2 .Shell解析器

1Linux提供的Shell解析器有:

 

[fsdm@hadoop101 ~]$ cat /etc/shells 
/bin/sh
/bin/bash
/sbin/nologin
/bin/dash
/bin/tcsh
/bin/csh

 常用的解析一般是 : /bin/bash

2bashsh的关系

[fsdm@hadoop101 bin]$ ll | grep bash
-rwxr-xr-x. 1 root root 941880 5月  11 2016 bash
lrwxrwxrwx. 1 root root      4 5月  27 2017 sh -> bash

 可以看到sh是引用的bash

3Centos默认的解析bash

[fsdm@hadoop102 bin]$ echo $SHELL
/bin/bash

3. Shell脚本入门

1脚本格式

脚本以#!/bin/bash开头指定解析

 

2第一个Shell脚本helloworld

 

1)需求:创建一个Shell脚本,输出helloworld

 

2案例实操:

 

[fsdm@hadoop101 datas]$ touch helloworld.sh
[fsdm@hadoop101 datas]$ vi helloworld.sh

在helloworld.sh中输入如下内容
#!/bin/bash
echo "helloworld"

 

3脚本的常用执行方式

种:采用bashsh+脚本相对路径或绝对路径(不用赋予脚本+x权限)

001.sh+脚本的相路径

 

[fsdm@hadoop101 datas]$ sh helloworld.sh 
Helloworld

 

002.sh+脚本的绝对路径

 

 

 

[fsdm@hadoop101 datas]$ sh /home/fsdm/datas/helloworld.sh 
helloworld

003.bash+脚本的相对路径

 

[fsdm@hadoop101 datas]$ bash helloworld.sh 
Helloworld

004.bash+脚本绝对路径

 

[fsdm@hadoop101 datas]$ bash /home/fsdm/datas/helloworld.sh 
Helloworld

 

种:采用输入脚本的绝对路径或相对路径执行脚本必须具有可执行权限+x

a)首先要赋予helloworld.sh 脚本的+x权限

 

[fsdm@hadoop101 datas]$ chmod 777 helloworld.sh

 

b)执行脚本

相对路径

 

[fsdm@hadoop101 datas]$ ./helloworld.sh 
Helloworld

 

绝对路径

 

[fsdm@hadoop101 datas]$ /home/fsdm/datas/helloworld.sh 
Helloworld

 

注意:第一种执行方法,本质bash解析器帮你执行脚本,所以脚本本身不需要执行权限。二种执行方法,本质是脚本需要自己执行需要执行权限。

 

3Shell脚本:多命令处理

 

1)需求

 

/home/fsdm/目录下创建一个banzhang.txt,banzhang.txt文件中增加“I love cls”

 

2)案例实操:

 

[fsdm@hadoop101 datas]$ touch batch.sh
[fsdm@hadoop101 datas]$ vi batch.sh

在batch.sh中输入如下内容
#!/bin/bash

cd /home/fsdm
touch cls.txt
echo "I love cls" >>cls.txt

 

4. Shell中的变量

4.1 系统变量

1. 常用系统变量

$HOME$PWD$SHELL$USER

2案例实操

1)查看系统变量的值

 

[fsdm@hadoop101 datas]$ echo $HOME
/home/fsdm

 

2显示当前Shell中所有变量:set

 

[fsdm@hadoop101 datas]$ set
BASH=/bin/bash
BASH_ALIASES=()
BASH_ARGC=()
BASH_ARGV=()

 

4.2 自定义变量

1基本语法

1)定义变量:变量= 

2)撤销变量:unset 变量

3)声明静态变量:readonly变量,注意:不能unset

2变量定义规则

1)变量名称可以由字母、数字和下划线组成,但是不能以数字开头环境变量名建议大写

2等号两侧不能有空格

3bash中,变量默认类型都是字符串类型,无法直接进行数值运算。

4)变量的值如果有空格,需要使用双引号或单引号括起来。

3案例实操

1)定义变量A

 

[fsdm@hadoop101 datas]$ A=5
[fsdm@hadoop101 datas]$ echo $A
5

 

2变量A重新赋值

 

[fsdm@hadoop101 datas]$ A=8
[fsdm@hadoop101 datas]$ echo $A
8

 

3)撤销变量A

 

[fsdm@hadoop101 datas]$ unset A
[fsdm@hadoop101 datas]$ echo $A

 

4)声明静态变量B=2,不能unset或改变变量值

 

[fsdm@hadoop101 datas]$ readonly B=2
[fsdm@hadoop101 datas]$ echo $B
2
[fsdm@hadoop101 datas]$ B=9
-bash: B: readonly variable

 

  readonly 只读(静态变量)

5bash中,变量默认类型都是字符串类型,无法直接进行数值运算

 

[fsdm@hadoop102 ~]$ C=1+2
[fsdm@hadoop102 ~]$ echo $C
1+2

 

6变量的值如果有空格,需要使用双引号或单引号括起来

 

[fsdm@hadoop102 ~]$ D=I love banzhang
-bash: world: command not found
[fsdm@hadoop102 ~]$ D="I love banzhang"
[fsdm@hadoop102 ~]$ echo $A
I love banzhang

 

7)可把变量提升为全局环境变量,可供其他Shell程序使用

export 变量名

[fsdm@hadoop101 datas]$ vim helloworld.sh 

在helloworld.sh文件中增加echo $B
#!/bin/bash

echo "helloworld"
echo $B

[fsdm@hadoop101 datas]$ ./helloworld.sh 
Helloworld

发现并没有打印输出变量B的值

我们 export 一下B,然后执行脚本:

[fsdm@hadoop101 datas]$ export B
[fsdm@hadoop101 datas]$ ./helloworld.sh 
helloworld
2

 

4.3 特殊变量$n

1基本语法

$n (功能描述:n为数字,$0代表该脚本名称$1-$9代表第一到第九个参数,十以上的参数,十以上的参数需要用大括号包含,如${10}

2案例实操

1)输出该脚本文件名称输入参数1和输入参数2

 

[fsdm@hadoop101 datas]$ touch parameter.sh 
[fsdm@hadoop101 datas]$ vim parameter.sh

#!/bin/bash
echo "$0  $1   $2"

[fsdm@hadoop101 datas]$ chmod 777 parameter.sh

[fsdm@hadoop101 datas]$ ./parameter.sh cls  xz
./parameter.sh  cls   xz

 

4.4 特殊变量$#

1基本语法

$# (功能描述:获取所有输入参数个数,常用于循环

2案例实操

1获取输入参数的个数

 

[fsdm@hadoop101 datas]$ vim parameter.sh

#!/bin/bash
echo "$0  $1   $2"
echo $#

[fsdm@hadoop101 datas]$ chmod 777 parameter.sh

[fsdm@hadoop101 datas]$ ./parameter.sh cls  xz
parameter.sh cls xz 
2

 

4.5 特殊变量$*$@

1基本语法

$* (功能描述:这个变量代表命令行中所有的参数,$*把所有的参数看成一个整体)

$@ (功能描述:这个变量也代表命令行中所有的参数,不过$@把每个参数区分对待)

2案例实操

1)打印输入所有参数

 

[fsdm@hadoop101 datas]$ vim parameter.sh

#!/bin/bash
echo "$0  $1   $2"
echo $#
echo $*
echo $@

[fsdm@hadoop101 datas]$ bash parameter.sh 1 2 3
parameter.sh  1   2
3
1 2 3
1 2 3

 

4.6 特殊变量$

1基本语法

$ (功能描述:最后一次执行的命令的返回状态。如果这个变量的值为0,证明上一个命令正确执行;如果这个变量的值为非0(具体是哪个数,由命令自己来决定),则证明上一个命令执行不正确了。)

2案例实操

1判断helloworld.sh脚本是否正确执行

 

[fsdm@hadoop101 datas]$ ./helloworld.sh 
hello world
[fsdm@hadoop101 datas]$ echo $?
0

 

5. 运算符

1基本语法

1“$((运算式))”“$[运算式]”

2expr  + , - , \\*,  /,  %    ,乘,除,取余

注意expr运算符间要有空格

2案例实操:

1计算3+2的值

 

[fsdm@hadoop101 datas]$ expr 2 + 3
5

 

2计算3-2的值

 

[fsdm@hadoop101 datas]$ expr 3 - 2 
1

 

3计算(2+3*4的值

aexpr一步完成计算

 

 

 

 

[fsdm@hadoop101 datas]$ expr `expr 2 + 3` \\* 4
20

b)采用$[运算式]方式

 

[fsdm@hadoop101 datas]# S=$[(2+3)*4]
[fsdm@hadoop101 datas]# echo $S

 

 

基础篇结束,如需深入请阅读后续篇章,如有疑问私信或评论指出

 

以上是关于大数据系列博客之 --- 深入简出 Shell 脚本语言(基础篇)的主要内容,如果未能解决你的问题,请参考以下文章

“深入简出”好程序员教你MapReduce全过程

Python基础篇:函数的深入简出

Python基础篇:函数的深入简出

Python基础篇:函数的深入简出

深入学习 jQuery 选择器系列第三篇——过滤选择器之索引选择器 - 小火柴的蓝色理想 - 博客园

数据挖掘入门系列教程(四点五)之Apriori算法