大数据学习——shell编程

2.1 基本格式

代码写在普通文本文件中，通常以 .sh为后缀名

vi hello.sh

#!/bin/bash ## 表示用哪一种shell解析器来解析执行我们的这个脚本程序

echo "hello world" ## 注释也可以写在这里

## 这是一行注释

执行脚本

sh hello.sh

或给脚本添加x权限，直接执行

chmod 755 hello.sh

./hello.sh

2.2 基本语法

2.2.1 系统变量

Linux Shell中的变量分为“系统变量”和“用户自定义变量”

可以通过set命令查看系统变量

系统变量：$HOME、$PWD、$SHELL、$USER等等

2.2.2 自定义变量

1、语法

变量＝值（例如STR=abc）

等号两侧不能有空格

变量名称一般习惯为大写

使用变量： $arg

双引号和单引号有区别，

双引号仅将空格脱意，

单引号会将变量引用比如$param脱意

2、示例

STR="hello world"

A=9

echo $A

echo $STR

如果想打印 hello worlds is greater 怎么办？

echo $STRs is greate 行吗？

不行，正确写法是：

echo ${STR}s is greate

unset A 撤销变量 A

readonly B=2 声明静态的变量 B=2，不能 unset

export A #可把变量提升为当前shell进程中的全局环境变量，可供其他子shell程序使用

注意理解export：

[root@shizhan01 scripts]# vi a.sh

#!/bin/bash

a="a in a.sh"

echo $a

/root/scripts/b.sh

[root@shizhan01 scripts]# vi b.sh

#!/bin/bash

b="b in b.sh"

echo $b

echo $a

然后执行 ./a.sh ，会发现 b脚本中并没有把a脚本中定义的a变量打印出来

如果要在b中打印出a脚本的变量a，需要在a脚本中把变量a做export定义

此时，a变量就成了a.sh脚本所在bash进程的全局变量，该进程的所有子进程都能访问到变量a

另一种方式：

如果在a.sh脚本中用如下方式调用b.sh

. ./b.sh ## 注意：重点关注最前面那个 “.”号

或者

source ./b.sh ##

则，b.sh就在a.sh所在的bash进程空间中运行

总结：

1、a.sh中直接调用b.sh，会让b.sh在a所在的bash进程的“子进程”空间中执行

2、而子进程空间只能访问父进程中用export定义的变量

3、一个shell进程无法将自己定义的变量提升到父进程空间中去

4、“.”号执行脚本时，会让脚本在调用者所在的shell进程空间中执行

3、反引号赋值

A=`ls -la` ## 反引号，运行里面的命令，并把结果返回给变量A

A=$(ls -la) ## 等价于反引号

4、特殊变量

$? 表示上一个命令退出的状态码

$$ 表示当前进程编号

$0 表示当前脚本名称

$n 表示n位置的输入参数（n代表数字，n>=1）

$# 表示参数的个数，常用于循环

$*和$@ 都表示参数列表 .`

注：$*与$@区别

$* 和 $@ 都表示传递给函数或脚本的所有参数

ü 不被双引号" "包含时——

$* 和 $@ 都以$1 $2 … $n 的形式组成参数列表

ü 当它们被双引号" "包含时——

"$*" 会将所有的参数作为一个整体，以"$1 $2 … $n"的形式组成一个整串；

"$@" 会将各个参数分开，以"$1" "$2" … "$n" 的形式组成一个参数列表

2.3 运算符

2.3.1 算数运算

1、用expr

格式 expr m + n 或$((m+n)) 注意expr运算符间要有空格

例如计算（2＋3 ）×4 的值

1 .分步计算
S=`expr 2 + 3`
expr $S * 4 ## *号需要转义

2.一步完成计算

expr `expr 2 + 3 ` * 4

echo `expr \`expr 2 + 3\` * 4`

2、用(())

((1+2))

(((2+3)*4))

count=1

((count++))

echo $count

但是要想取到运算结果，需要用$引用

a=$((1+2))

3、用$[]

a=$[1+2]

echo $a

2.5 流程控制

2.5.1 if语法

1、语法格式

if condition
then
    statements
[elif condition
    then statements. ..]
[else
    statements ]
fi

2、示例

#!/bin/bash

read -p "please input your name:" NAME ## read命令用于从控制台读取输入数据

## printf '%s ' $NAME

if [ $NAME = root ]

then

echo "hello ${NAME}, welcome !"

elif [ $NAME = itcast ]

then

echo "hello ${NAME}, welcome !"

else

echo "SB, get out here !"

3、判断条件

1/ 条件判断基本语法

[ condition ] (注意condition前后要有空格)

#非空返回true，可使用$?验证（0为true，>1为false）

[ itcast ]

#空返回false

[ ]

注意[ ]内部的=周边的空格，有区别：

[root@shizhan01 scripts]# if [ a = b ];then echo ok;else echo notok;fi

notok

[root@shizhan01 scripts]# if [ a=b ];then echo ok;else echo notok;fi

短路（理解为三元运算符）

[ condition ] && echo OK || echo notok

条件满足，执行&&后面的语句；条件不满足，执行|| 后面的语句

2/ 条件判断组合

注：[] 与[[ ]] 的区别：[[ ]] 中逻辑组合可以使用 && || 符号

而[] 里面逻辑组合可以用 -a -o

[root@mini ~]# if [ a = b && b = c ]; then echo ok;else echo notok;fi

-bash: [: missing `]'

notok

[root@mini ~]# if [ a = b -a b = b ]; then echo ok;else echo notok;fi

notok

[root@mini ~]# if [ a = b -o b = b ]; then echo ok;else echo notok;fi

[root@mini ~]# if [[ a = b && b = b ]]; then echo ok;else echo notok;fi

notok

[root@mini ~]# if [[ a = b || b = b ]]; then echo ok;else echo notok;fi

3/ 常用判断运算符

字符串比较：= !=

-z 字符串长度是为0返回true

-n 字符串长度是不为0返回true

if [ 'aa' = 'bb' ]; then echo ok; else echo notok;fi

if [ -n "aa" ]; then echo ok; else echo notok;fi

if [ -z "" ]; then echo ok; else echo notok;fi

整数比较：

-lt 小于

-le 小于等于

-eq 等于

-gt 大于

-ge 大于等于

-ne 不等于

文件判断：

-d 是否为目录

if [ -d /bin ]; then echo ok; else echo notok;fi

-f 是否为文件

if [ -f /bin/ls ]; then echo ok; else echo notok;fi

-e 是否存在

if [ -e /bin/ls ]; then echo ok; else echo notok;fi

2.5.2 while语法

1、方式一

while expression

command

…

done

2、方式二

i=1

while ((i<=3))

echo $i

let i++

done

2.5.3 case语法

case $1 in

start)

echo "starting"

;;

stop)

echo "stoping"

;;

echo "Usage: {start|stop}"

esac

2.5.4 for语法

1、方式一

for N in 1 2 3

echo $N

done

或

for N in 1 2 3; do echo $N; done

或

for N in {1..3}; do echo $N; done

2、方式二

for ((i = 0; i <= 5; i++))

echo "welcome $i times"

done

或

for ((i = 0; i <= 5; i++)); do echo "welcome $i times"; done

2.6 函数使用

2.6.1 函数定义

#!/bin/sh

# func1.sh

hello() ## 函数定义

{

echo "Hello there today's date is `date +%Y-%m-%d`"

# return 2 ###返回值其实是状态码，只能在[0-255]范围内

}

hello

# echo $? 获取函数的return值

echo "now going to the function hello"

echo "back from the function"

函数调用：

function hello()

或 function hello

或 hello

注意：

1.必须在调用函数地方之前，先声明函数，shell脚本是逐行运行。不会像其它语言一样先预编译

2.函数返回值，只能通过$? 系统变量获得，可以显示加：return 返回，如果不加，将以最后一条命令运行结果，作为返回值。 return后跟数值n(0-255)

脚本调试：

sh -vx helloWorld.sh

或者在脚本中增加set -x

2.6.2 函数参数

#!/bin/bash

# fun1.sh

funWithParam(){

echo "第一个参数为 $1 !"

echo "第二个参数为 $2 !"

echo "第十个参数为 $10 !"

echo "第十个参数为 ${10} !"

echo "第十一个参数为 ${11} !"

echo "参数总数有 $# 个!"

echo "作为一个字符串输出所有参数 $* !"

}

funWithParam 1 2 3 4 5 6 7 8 9 34 73

注意，$10 不能获取第十个参数，获取第十个参数需要${10}。当n>=10时，需要使用${n}来获取参数。

2.6.3 函数返回值

#!/bin/bash

# fun2.sh

funWithReturn(){

echo "这个函数会对输入的两个数字进行相加运算..."

echo "输入第一个数字: "

read aNum

echo "输入第二个数字: "

read anotherNum

echo "两个数字分别为 $aNum 和 $anotherNum !"

return $(($aNum+$anotherNum))

}

funWithReturn

echo "输入的两个数字之和为 $? !"

2.6.4 跨脚本调用函数

假如上述的脚本文件fun2.sh保存在此路径： /root/fun2.sh

则可在脚本fun_other.sh中调用脚本fun2.sh中的函数

#!/bin/bash

# fun_other.sh

. /root/fun2.sh ## 注： . 和 / 之间有空格

# 或者 source /root/fun2.sh

funWithParam 11 22 33 44 55 66 77 88 99 100 101