linux 三剑客 之 sed
# sed 是什么？ # sed : 字符流编辑器 Stream Editor； sed 擅长 替换、取行等 # sed 的功能与版本： 处理纯文本文件、日志、配置文件等 增加、删除、修改、查询 sed --version # 查看 sed 版本 # sed 语法格式： sed [选项] [sed指令] [输入文件] sed -i.bak 's#oldboy#oldgirl#g' oldboy.txt # -i --- sed命令的参数 ；sed --- sed命令，一个指令 ；g --- 小尾巴， 修饰
sed 命令的执行流程
模式空间： sed 从文件读取一行文件后存入的缓冲区 （这个缓冲区是在内存中的）
sed 常用功能：
1. 查询 2. 增加 3. 删除 4. 替换 5. 拓展
1. sed 常用功能之显示 p (print)
# 创建测试环境： cat>person.txt<<EOF 101,oldboy,CEO 102,zhangyao,CTO 103,Alex,COO 104,yy,CFO 105,feixue,CIO EOF # cat>...<<EOF...EOF 表示创建文件 ； cat>>...<<EOF...EOF 表示向文件中追加内容 [root@NEO oldboy]# cat person.txt 101,oldboy,CEO 102,zhangyao,CTO 103,Alex,COO 104,yy,CFO 105,feixue,CIO [root@NEO oldboy]# # 1.1 显示某一行 [root@NEO oldboy]# sed -n '3p' person.txt # -n 表示 取消默认输出； '3p' 表示显示第3行 103,Alex,COO # 1.2 显示连续多行文本 # 显示第2行到第4行的内容，包含第2行和第4行 [root@NEO oldboy]# sed -n '2,4p' person.txt # '2,4p' 表示显示从第2行到第4行 102,zhangyao,CTO 103,Alex,COO 104,yy,CFO # 1.3 显示包含 oldboy 的行到 包含104的行 [root@NEO oldboy]# sed -n '/oldboy/p' person.txt # '/oldboy/p' ---> 表示 包含 oldboy 的行 ；此时 该行命令 相当于 grep 'oldboy'，但 grep 不能过滤范围 101,oldboy,CEO [root@NEO oldboy]# sed -n '/oldboy/,/104/p' person.txt # '/oldboy/,/104/p' ---> 包含 oldboy 的行 到 包含 104 的行 101,oldboy,CEO 102,zhangyao,CTO 103,Alex,COO 104,yy,CFO [root@NEO oldboy]# sed -n '/oldboy/,/^104/p' person.txt # '/oldboy/,/^104/p' ---> 表示从包含 oldboy 的行到 以104开头的行 101,oldboy,CEO 102,zhangyao,CTO 103,Alex,COO 104,yy,CFO # 1.4 过滤多个字符串 # 默认情况下，sed只支持基本正则表达式；sed 的 -r 参数，可以支持 扩展正则表达式 （| 和 ()） # 显示包含 oldboy 的行 或者 yy 的行 [root@NEO oldboy]# egrep 'oldboy|yy' person.txt 101,oldboy,CEO 104,yy,CFO [root@NEO oldboy]# sed -rn '/oldboy|yy/p' person.txt # -r '/oldboy|yy/p' ---> 表示 包含 oldboy 或者 yy 的行 101,oldboy,CEO 104,yy,CFO # sed 命令通过正则表达式进行过滤时，相当于 egrep # 1.5 查询指定多行 [root@NEO oldboy]# sed -n '1p;3p' person.txt # '1p;3p' ---> 第1行 和 第3行； 多行之间用 逗号 分隔 101,oldboy,CEO 103,Alex,COO [root@NEO oldboy]# sed -n '1p;2,4p;5p' person.txt # , 和 ; 搭配使用 101,oldboy,CEO 102,zhangyao,CTO 103,Alex,COO 104,yy,CFO 105,feixue,CIO [root@NEO oldboy]# sed -n '/oldboy/p;3,5p' person.txt 101,oldboy,CEO 103,Alex,COO 104,yy,CFO 105,feixue,CIO
2. sed 常用功能之增加
# 2.1 单行增加： # 在第3行后面增加一行内容 [root@NEO oldboy]# cat person.txt 101,oldboy,CEO 102,zhangyao,CTO 103,Alex,COO 104,yy,CFO 105,feixue,CIO [root@NEO oldboy]# sed '3a 103.5,Lee,UFO' person.txt # 3a 表示在第3行的后面增加一行内容，3a 后面的空格没有用，也可以不写 101,oldboy,CEO 102,zhangyao,CTO 103,Alex,COO 103.5,Lee,UFO 104,yy,CFO 105,feixue,CIO[root@NEO oldboy]# cat person.txt # sed '3a ' 命令并没有真正修改文件内容，如果想要真正修改文件内容，可以用 sed 的 -i 参数 101,oldboy,CEO 102,zhangyao,CTO 103,Alex,COO 104,yy,CFO 105,feixue,CIO [root@NEO oldboy]# sed '3i 103.5,Lee,UFO' person.txt # 3i 表示在第3行的前面再增加一行内容；同理， 该命令也没有真正修改文件内容，想要真正修改文件内容也是加上 -i 参数 101,oldboy,CEO 102,zhangyao,CTO 103.5,Lee,UFO 103,Alex,COO 104,yy,CFO 105,feixue,CIO # 增加单选文本： a 参数 ：追加 append，在指定行后添加一行或多行文本 i 参数 ：插入 insert，在指定行前添加一行或多行文本 # 在最后一行插入： [root@NEO oldboy]# sed -n '$p' person.txt # 在 sed 命令中， $ 表示最后一行 105,feixue,CIO [root@NEO oldboy]# sed '$a 103.5,Lee,UFO' person.txt # 在最后一行插入一行内容 101,oldboy,CEO 102,zhangyao,CTO 103,Alex,COO 104,yy,CFO 105,feixue,CIO 103.5,Lee,UFO [root@NEO oldboy]# sed '$a new,new,new old,old,old' person.txt # 在最后一行增加多行内容，用 分隔 （这种方法不常用；此命令已被 cat>>...<<EOF...EOF 替代，而且在最后一行的多行追加一般用 cat>> 方法） 101,oldboy,CEO 102,zhangyao,CTO 103,Alex,COO 104,yy,CFO 105,feixue,CIO new,new,new old,old,old
3. sed 常用功能之删除
# 去除空行实战：删除最后一行 [root@NEO oldboy]# cat person.txt 101,oldboy,CEO 102,zhangyao,CTO 103,Alex,COO 104,yy,CFO 105,feixue,CIO [root@NEO oldboy]# sed '$d' person.txt # 删除最后一行 101,oldboy,CEO 102,zhangyao,CTO 103,Alex,COO 104,yy,CFO [root@NEO oldboy]# sed '1,3d' person.txt # 删除第1行到第3行； d 表示 delete 104,yy,CFO 105,feixue,CIO # 企业案例：不显示文件中空行 [root@NEO oldboy]# vim person.txt [root@NEO oldboy]# cat -nA person.txt # cat 的 -n 参数表示显示 行号， -A 表示 显示结尾的 $ 1 101,oldboy,CEO$ 2 102,zhangyao,CTO$ 3 $ 4 103,Alex,COO$ 5 $ 6 104,yy,CFO$ 7 $ 8 105,feixue,CIO$ [root@NEO oldboy]# grep -v '^$' person.txt # grep -v 表示 排除 101,oldboy,CEO 102,zhangyao,CTO 103,Alex,COO 104,yy,CFO 105,feixue,CIO [root@NEO oldboy]# sed '/^$/d' person.txt # sed 的 /^$/ 表示空行 101,oldboy,CEO 102,zhangyao,CTO 103,Alex,COO 104,yy,CFO 105,feixue,CIO # 另一种方法： sed 的 ! 表示 取反； 在 p d 这些参数前面加 ! [root@NEO oldboy]# sed -n '/^$/p' person.txt # 显示空行 [root@NEO oldboy]# sed -n '/^$/!p' person.txt # 排除空行 101,oldboy,CEO 102,zhangyao,CTO 103,Alex,COO 104,yy,CFO 105,feixue,CIO [root@NEO oldboy]# [root@NEO oldboy]# sed '$!d' person.txt # '$!d' ： 不删除最后一行 105,feixue,CIO
4. sed常用功能之替换
# 文本替换： sed -i 's#neo#NEO#g' oldboy.log # s 单独使用 ---> 将每一行中 第一处匹配的字符串进行替换 # g (global：全局) ---> 每一行进行全部替换 --> sed 指令 s 的替换标志之一（全局替换） # sed 的 -i 参数 ---> 用于修改文件； -i.ori ---> 自动备份；先备份源文件，然后修改文件的内容 [root@NEO oldboy]# cat person.txt 101,oldboy,CEO 102,zhangyao,CTO 103,Alex,COO 104,yy,CFO 105,feixue,CIO [root@NEO oldboy]# sed 's#o#AAAA#' person.txt 101,AAAAldboy,CEO 102,zhangyaAAAA,CTO 103,Alex,COO 104,yy,CFO 105,feixue,CIO [root@NEO oldboy]# sed 's#o#AAAA#g' person.txt 101,AAAAldbAAAAy,CEO 102,zhangyaAAAA,CTO 103,Alex,COO 104,yy,CFO 105,feixue,CIO
5. sed变量替换 （重点）
[root@NEO oldboy]# x=oldboy # oldboy 赋值给 x [root@NEO oldboy]# y=oldgirl # oldgirl 赋值给 y (中间不要有空格) [root@NEO oldboy]# sed 's#$x#$y#g' person.txt # '' ---> 所见即所得，所以 '' 中的内容没有被解析 101,oldboy,CEO 102,zhangyao,CTO 103,Alex,COO 104,yy,CFO 105,feixue,CIO [root@NEO oldboy]# sed "s#$x#$y#g" person.txt # "" 中的特殊符号（$ $() `` !）会被解析 ； $x 表示 x变量 101,oldgirl,CEO 102,zhangyao,CTO 103,Alex,COO 104,yy,CFO 105,feixue,CIO # sed 的反向引用 ：参考以前的
linux 三剑客 之 awk --- 取列、取行、统计
1. 基本的awk 执行过程:
取出 passwd 文件的第二行的第一列和第二列
[root@NEO ~]# head -2 /etc/passwd root:x:0:0:root:/root:/bin/bash bin:x:1:1:bin:/bin:/sbin/nologin [root@NEO ~]# awk -F ":" 'NR==2{print $1,$2}' /etc/passwd bin x # awk 语法格式： # awk 参数 '模式{动作}' 文件 ---> awk 参数 '条件（找谁）{干啥}' 文件
2. 模式匹配：模式与动作
# 通过正则表达式作为模式 # awk 使用正则表达式作为模式 # 创建环境： mkdir -p /server/files/ cat >>/server/files/reg.txt<<EOF Zhang Dandan 41117397 :250:100:175 Zhang Xiaoyu 390320151 :155:90:201 Meng Feixue 80042789 :250:60:50 Wu Waiwai 70271111 :250:80:75 Liu Bingbing 41117483 :250:100:175 Wang Xiaoai 3515064655 :50:95:135 Zi Gege 1986787350 :250:168:200 Li Youjiu 918391635 :175:75:300 Lao Nanhai 918391635 :250:100:175 EOF # 第1表表示姓，第2列表示名字，第3列表示ID，第4列表示捐款金额 [root@NEO server]# cat /server/files/reg.txt Zhang Dandan 41117397 :250:100:175 Zhang Xiaoyu 390320151 :155:90:201 Meng Feixue 80042789 :250:60:50 Wu Waiwai 70271111 :250:80:75 Liu Bingbing 41117483 :250:100:175 Wang Xiaoai 3515064655 :50:95:135 Zi Gege 1986787350 :250:168:200 Li Youjiu 918391635 :175:75:300 Lao Nanhai 918391635 :250:100:175 [root@NEO server]# # 2.1 找出包含 111 的行： [root@NEO files]# pwd /server/files [root@NEO files]# awk '/111/' reg.txt Zhang Dandan 41117397 :250:100:175 Wu Waiwai 70271111 :250:80:75 Liu Bingbing 41117483 :250:100:175 # 其它的正则表达式的用法在 awk 没什么变化，但 ^ 和 $ 在 awk 中不太一样 ^ 表示 某一列中 以什么开头的字符串(以什么开头的列) ： $3~/^oldboy/ 表示 第3列中 以 oldboy 开头的字符串， ~ 可理解成 包含 $ 表示 某一列中 以什么结尾的字符串(以什么结尾的列) ： $3~/oldboy$/ 同理 # 2.2 显示Xiaoyu的姓名和ID号码 [root@NEO files]# awk '/Xiaoyu/' reg.txt # 只有模式（因为没有{}）；'/Xiaoyu/' 表示包含 Xiaoyu 的行，它相当于 '$0~/Xiaoyu/'，即 把一整行当作一列， awk 的 $0 表示把一整行的内容放到了 $0 中（把一整行当作一列） Zhang Xiaoyu 390320151 :155:90:201 [root@NEO files]# awk '$0~/Xiaoyu/' reg.txt Zhang Xiaoyu 390320151 :155:90:201 [root@NEO files]# awk '/Xiaoyu/{print $1,$2,$3}' reg.txt # /Xiaoyu/ 表示包含 Xiaoyu 的行 Zhang Xiaoyu 390320151 [root@NEO files]# awk '$2~/Xiaoyu/{print $1,$2,$3}' reg.txt # $2~/Xiaoyu/ 表示 第2列（名字那一列）包含 Xiaoyu 的行 Zhang Xiaoyu 390320151 # 2.3 显示所有以41开头的ID号码的人的全名和ID号码 [root@NEO files]# awk '$3~/^41/{print $1,$2,$3}' reg.txt # $3~/^41/ ---> 第3列（ID那一列）以 41 开头 Zhang Dandan 41117397 Liu Bingbing 41117483 # 2.4 显示所有ID号码最后一位数字是1或5的人的全名 [root@NEO files]# awk '$3~/[15]$/{print $1,$2}' reg.txt # $3~/[15]$/ 表示模式（ {}外面的就是模式 ）， {print $1,$2} 表示动作 Zhang Xiaoyu Wu Waiwai Wang Xiaoai Li Youjiu Lao Nanhai # 2.5 显示Xiaoyu的捐款，每个值都以 $ 开头，如 $520$200$135 # 4. awk 里面进行替换的方法 --- gsub 函数 ： '{gsub(/要找的内容（支持正则）/,"替换成的内容",$列号)}' [root@NEO files]# awk '{gsub(/:/,"$",$4)}' reg.txt # 没有输出是因为 awk 没有默认输出 [root@NEO files]# awk '{gsub(/:/,"$",$4);print}' reg.txt # 再加上 ;print 就会有输出 Zhang Dandan 41117397 $250$100$175 Zhang Xiaoyu 390320151 $155$90$201 Meng Feixue 80042789 $250$60$50 Wu Waiwai 70271111 $250$80$75 Liu Bingbing 41117483 $250$100$175 Wang Xiaoai 3515064655 $50$95$135 Zi Gege 1986787350 $250$168$200 Li Youjiu 918391635 $175$75$300 Lao Nanhai 918391635 $250$100$175 # 第4列的 : 替换成了 $ # gsub(/目标/,"替换为什么",第几列) # gsub(/目标/,"替换为什么") === gsub(/目标/,"替换为什么",$0) ---> 整行替换 [root@NEO files]# awk '$2~/Xiaoyu/{gsub(/:/,"$",$4);print}' reg.txt Zhang Xiaoyu 390320151 $155$90$201 [root@NEO files]# awk '$2~/Xiaoyu/{gsub(/:/,"$",$4);print $4}' reg.txt $155$90$201 [root@NEO files]# # gsub() 是awk 的一个函数
3. awk 数组 --- 统计与计算
# 特殊模式： BEGIN 和 END BEGIN{} ---> BEGIN里面的内容，会在 awk 读取文件内容之前运行 # 一般用于测试、计算等 END{} ---> END里面的内容，会在 awk 读取文件的最后一行之后运行 （END很常用） # 用来显示最终结果（前面一直在计算，最后END显示结果） [root@NEO files]# awk 'BEGIN{print "this is beginning"}' # 只写了个BEGIN ，后面就不用接文件了 this is beginning [root@NEO files]# awk 'BEGIN{print "this is beginning"} {print NR,$0}' reg.txt # {print NR,$0} ---> NR 表示 行号 this is beginning # BEGIN的内容 1 Zhang Dandan 41117397 :250:100:175 2 Zhang Xiaoyu 390320151 :155:90:201 3 Meng Feixue 80042789 :250:60:50 4 Wu Waiwai 70271111 :250:80:75 5 Liu Bingbing 41117483 :250:100:175 6 Wang Xiaoai 3515064655 :50:95:135 7 Zi Gege 1986787350 :250:168:200 8 Li Youjiu 918391635 :175:75:300 9 Lao Nanhai 918391635 :250:100:175 # 统计 /etc/services 文件里面的空行数量 [root@NEO files]# awk '/^$/{print NR}' /etc/services # '/^$/{print NR}' 22 266 299 320 326 393 461 474 479 486 494 506 512 518 583 584 [root@NEO files]# awk '/^$/{i=i+1;print i}' /etc/services # i=i+1 表示 把 i+1 的结果赋值给 i ，每个增加1，所以这个公式用来统计；i=i+1 也可以简写成 i++ ； i=i+1 和 print 之间用 ; 分隔 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 [root@NEO files]# # i=i+1 === i++ ---> 用来统计 [root@NEO files]# awk '/^$/{i=i+1}END{print i}' /etc/services # {i=i+1}END{print i} ---> i=i+1 是先计算，END{print i} 表示 文件读取文件最后一行后 执行 {print i} 16 [root@NEO files]# awk '/^$/{i++}END{print i}' /etc/services # i++ 相当于 i=i+1 16
awk 数组案例详解与awk总结
#awk数组-统计与计算 # awk 数组的组成： hotel[110]="张三" # hotel 表示 数组的名字（酒店名称）， 110 表示数组的元素名称（房间号）， 张三 表示 元素内容（房间内容） ； hotel[110] 组成了一个数组 [root@NEO files]# awk 'BEGIN{hotel[110]="NEO";hotel[114]="XO";print hotel[110],hotel[114]}' # 110]="NEO" ---> 创建数组；print hotel[110] ---> 把数组中的内容显示出来 NEO XO # 处理以下文件内容,将域名取出并根据域名进行计数排序处理:(百度和sohu面试题) http://www.etiantian.org/index.html http://www.etiantian.org/1.html http://post.etiantian.org/index.html http://mp3.etiantian.org/index.html http://www.etiantian.org/3.html http://post.etiantian.org/2.html [root@NEO files]# cat url.txt http://www.etiantian.org/index.html http://www.etiantian.org/1.html http://post.etiantian.org/index.html http://mp3.etiantian.org/index.html http://www.etiantian.org/3.html http://post.etiantian.org/2.html [root@NEO files]# awk -F "[/.]+" '{print $2}' url.txt # 让 $2 作为数组的元素 www www post mp3 www post # h[$2] 表示 把 第2列（www post mp3）作为元素名称组成一个数组；一共有 3个元素 # h[$2]++ 表示 每个元素名称 遇到相同的元素名称时 加1，遇到不同的元素名称时不做处理 # h["www"] 表示 www 这个元素名称中的 元素内容 [root@NEO files]# awk -F "[/.]+" '{h[$2]=h[$2]+1;print h["www"]}' url.txt 1 2 2 2 3 3 [root@NEO files]# # 显示所有元素的内容 [root@NEO files]# awk -F "[/.]+" '{h[$2]++}END{print h["www"],h["post"],h["mp3"]}' url.txt 3 2 1 # awk 自己提供的循环，可用于显示数组里面的内容： for(pol in h) ---> h是数组，pol 是h数组中的变量（数组的元素名称；遍历的也是数组的元素） [root@NEO files]# awk -F "[/.]+" '{h[$2]++}END{for(pol in h) print pol}' url.txt www mp3 post # 遍历的是 数组的元素名称 [root@NEO files]# awk -F "[/.]+" '{h[$2]++}END{for(pol in h) print h[pol]}' url.txt # 把 元素名称 放到 数组h中 3 1 2 [root@NEO files]# awk -F "[/.]+" '{h[$2]++}END{for(pol in h) print pol,h[pol]}' url.txt www 3 mp3 1 post 2
shell编程基础：
shell编程所需的基础知识：
熟练使用 vim 编辑器
熟练 SSH终端
熟练掌握 Linux常用命令
熟练掌握Linux正则表达式及三剑客命令（grep sed awk）
shell编程基础知识与环境
基础知识：
# 1. 什么是Shell ？ # 命令解释器； 你输入的命令，谁来给你解释/运行 # CentOS默认的 Shell 是 bash ： echo $SHELL /etc/passwd .sh 结尾的文件 file 命令也可以查看文件类型 [root@NEO ~]# echo $SHELL /bin/bash [root@NEO ~]# cat /etc/shells /bin/sh /bin/bash /sbin/nologin /bin/dash /bin/tcsh /bin/csh [root@NEO ~]# file /etc/init.d/iptables /etc/init.d/iptables: POSIX shell script text executable # shell script ---> shell脚本 # 2. 什么是Shell脚本？ # 命令大礼包 --- 一个程序文件，包含若干行Linux命令语句 # 循环，条件语句 # 创建shell脚本： # 1. 统一脚本存放目录 # 如： /server/scripts/ # 2. 推荐使用 vim 编辑器编程脚本 # 因为 vim 自带颜色 # 3. 第一行指出由哪个解释器来执行脚本中的内容： #!/bin/bash ---> #! 称为幻数，能被内核识别 ---> 必须写在第一行，如果不是第一行则为脚本注释行 ---> 双可以写为 #!/bin/sh # 4. 版权声明 # 5. 写一个简单脚本（切换目录显示文件属性）并运行 # 脚本目录示例： [root@NEO ~]# [root@NEO ~]# ls -l /server/scripts/ total 8 -rw-r--r-- 1 root root 66 Apr 7 23:22 ip.sh -rw-r--r-- 1 root root 9 Apr 7 14:30 show_date.sh # 脚本注释 & 版权声明： [root@NEO ~]# vim /server/scripts/ip.sh [root@NEO ~]# cat /server/scripts/ip.sh #!/bin/bash #!/bin/bash 表示 这个脚本是用 /bin/bash 运行解释的 # desc: show ip address # author: neo # time: 20190416 # version: v1.0 /sbin/ifconfig eth0 |awk -F "[ :]+" 'NR==2{print $4}' [root@NEO ~]# file /server/scripts/ip.sh /server/scripts/ip.sh: Bourne-Again shell script text executable [root@NEO ~]# /server/scripts/ip.sh # 正常运行脚本的方法：通过绝对路径 -bash: /server/scripts/ip.sh: Permission denied # 在linux 中创建的文件默认的权限是 644 [root@NEO ~]# sh /server/scripts/ip.sh # 以后在执行脚本的时候都是运行 sh 命令 10.0.0.200
变量
# 3.1 什么是变量？ # 用一个固定的字符串，替代更多更复杂的内容 # x=1 # devPath=/server/ # filelist=`ls` 或 $(ls) # 引用变量： $x 相当于 ${x} [root@NEO ~]# echo $PATH $LANG # 环境变量 /usr/local/sbin:/usr/local/bin:/sbin:/bin:/usr/sbin:/usr/bin:/root/bin en_US.UTF-8 [root@NEO ~]# x=1 # 往变量中放值 ； x 是普通变量（局部变量） [root@NEO ~]# echo $x # 取出变量中的值 1 [root@NEO ~]# # 3.2 变量的分类： # 3.2.1 局部变量（普通变量）： 只能在创建它们的Shell函数或Shell脚本中使用 定义变量： 变量名=value 变量名要求： 字母、数字、下划线组成，必须以字母或下划线开头 规范的变量名写法定义：见名知意 驼峰语法：首个单词字母小写，其余单词首字母大写 ---> oldAgeSex=1 把一个命令作为变量 普通字符串定义测试 [root@NEO ~]# week=10 [root@NEO ~]# echo $weekday # 此时系统认为 weekday 这个整体是个变量 [root@NEO ~]# echo ${week}day # $week 就相当于 ${week} 10day [root@NEO ~]# # 3.2.2 全局变量（环境变量）： 大写，在Linux中绝大地方都可以用 在创建他们的Shell及其派生出来的子Shell中使用 分类： 查看全局变量： env ---> 只显示全局变量 bash内置的环境变量： Shell通过环境变量来确定 登陆用户名、命令路径、终端类型、登陆日志等 LANG PAHT SEHLL UID 等 自定义环境变量： 建议所有环境变量名均为大写 必须用 export 命令定义 取消变量： unset 永久生效 [root@NEO ~]# echo $LANG $PATH $PS1 en_US.UTF-8 /usr/local/sbin:/usr/local/bin:/sbin:/bin:/usr/sbin:/usr/bin:/root/bin [u@h W]$ [root@NEO ~]# # 全局变量 和 局部变量 [root@NEO ~]# vim /server/scripts/show_date.sh [root@NEO ~]# cat /server/scripts/show_date.sh #!/bin/hash # desc: # author: # time: # version: echo $OLDBOY [root@NEO ~]# OLDBOY=10 # 此时的 OLDBOY 是一个普通变量，在 /server/scripts/show_date.sh 这个脚本中无法使用 [root@NEO ~]# echo $OLDBOY 10 [root@NEO ~]# sh /server/scripts/show_date.sh # 输出为空，因为 OLDBOY 是个局部变量，在 这个脚本中无法使用 [root@NEO ~]# # 让普通变量变成全局问题的方法： export 命令； export 是临时生效；取消全局问题的方法 ： unset 命令， unset 不但能取消全局变量，也能取消局部变量 [root@NEO ~]# export OLDBOY # 让 OLDBOY 这个普通变量 变成 全局变量 [root@NEO ~]# sh /server/scripts/show_date.sh 10 # 此时 OLDBOY 就能在 该脚本中使用了 [root@NEO ~]# [root@NEO ~]# env |grep OLDBOY OLDBOY=10 [root@NEO ~]# unset OLDBOY [root@NEO ~]# env |grep OLDBOY [root@NEO ~]# # 3.2.3 Shell 编程之环境变量相关的文件和目录： 全局环境变量配置文件： /etc/profile ---> 修改环境变量的文件 /etc/bashrc /etc/profile.d/ ---> 用户登陆到系统 会运行这个目录下面的脚本 ；脚本要有执行权限 用户自己的环境变量配置文件： ~/.bash_profile ~/.bashrc # 修改 /etc/profile.d/ 下的文件 ---> 用户登陆到系统会自动运行 [root@NEO ~]# ls /etc/profile.d/ colorls.csh cvs.csh glib2.csh lang.csh less.csh vim.csh which2.sh colorls.sh cvs.sh glib2.sh lang.sh less.sh vim.sh [root@NEO ~]# vim /etc/profile.d/show.sh [root@NEO ~]# cat /etc/profile.d/show.sh #!/bin/bash # desc: show ip address of eth0 # author: neo # time: 20190417 # version: v1.0 ip a s eth0 [root@NEO ~]# ll /etc/profile.d/show.sh -rw-r--r-- 1 root root 104 Apr 17 02:00 /etc/profile.d/show.sh [root@NEO ~]# chmod +x /etc/profile.d/show.sh [root@NEO ~]# ll /etc/profile.d/show.sh -rwxr-xr-x 1 root root 104 Apr 17 02:00 /etc/profile.d/show.sh WARNING! The remote SSH server rejected X11 forwarding request. Last login: Tue Apr 16 20:48:25 2019 from 10.0.0.1 2: eth0: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc pfifo_fast state UP qlen 1000 link/ether 00:0c:29:26:b5:57 brd ff:ff:ff:ff:ff:ff inet 10.0.0.200/24 brd 10.0.0.255 scope global eth0 inet6 fe80::20c:29ff:fe26:b557/64 scope link valid_lft forever preferred_lft forever [root@NEO ~]# # 自己写的跳板机放到 /etc/profile.d/ 下面 # 特殊变量： # 位置变量： $0 （在脚本中） 获取当前执行的shell脚本的文件名 如果执行脚本带路径那么就包括脚本路径 模拟系统脚本使用 $0 $n n 表示数字；$n 表示 第n个参数 $# 表示参数的个数 # 进程状态变量 $? ---> 显示上一个命令的执行结果；命令执行正确 ---> 结果为0 ， 命令执行错误 ---> 结果非0 ；软件安装后可用 $? 判断是否安装成功 # 位置变量： # 环境创建： [root@NEO scripts]# vim show_args.sh [root@NEO scripts]# cat show_args.sh #!/bin/bash # desc: # author: neo # time: # version: echo '$0:'$0 '$1:'$1 '$2:'$2 '$3:'$3 '$#:'$# # '$0:' 需要用单引号，双引号的话就被解析了 [root@NEO scripts]# sh show_args.sh $0:show_args.sh $1: $2: $3: $#:0 # $0 表示脚本的名字； $n 在脚本中表示第n个参数 [root@NEO scripts]# sh show_args.sh arg1 arg2 arg3 arg4 arg5 arg6 # 脚本后面可以跟参数 $0:show_args.sh $1:arg1 $2:arg2 $3:arg3 $#:6 # $# 表示参数的个数（脚本中一共有多少个参数） [root@NEO scripts]# ls /root/alex.oldboy.txt ls: cannot access /root/alex.oldboy.txt: No such file or directory [root@NEO scripts]# echo $? 2 # 执行错误 [root@NEO scripts]# ls /root/ alex.txt anaconda-ks.cfg data echotest.txt install.log.syslog oldboy-20171111.log [root@NEO scripts]# echo $? 0 # 执行正确 [root@NEO scripts]# # 变量赋值方法 --- read # 如何向变量中放内容？ [root@NEO scripts]# vim show_args.sh [root@NEO scripts]# cat show_args.sh #!/bin/bash # desc: # author: neo # time: # version: x=1 y=2 echo $x $y [root@NEO scripts]# sh show_args.sh 1 2 # 如果 x y 是动态的参数，则利用下面的方法 [root@NEO scripts]# vim show_args.sh [root@NEO scripts]# cat show_args.sh #!/bin/bash # desc: # author: neo # time: # version: x=$1 # 改成 $1 和 $2 y=$2 echo $x $y [root@NEO scripts]# sh show_args.sh 10 20 # 传参10和20；10传给$1 ，20传给 $2 10 20 # read 能够从命令行中读取内容放到变量中 （交互式的） [root@NEO scripts]# read -p "input x y:" x y input x y:10 20 [root@NEO scripts]# echo $x 10 [root@NEO scripts]# echo $y 20 [root@NEO scripts]# [root@NEO scripts]# vim show_args.sh [root@NEO scripts]# cat show_args.sh #!/bin/bash # desc: # author: neo # time: # version: # x=$1 # y=$2 read -p "input x y:" x y echo $x $y [root@NEO scripts]# sh show_args.sh input x y:30 40 30 40 [root@NEO scripts]#
循环条件：
条件表达式： 格式：[<测试表达式>] 先敲一对 [] ，然后退格输入2个空格 [ ]，最后再回退一个空格开始输入，即 [] 两端要各有一个空格，如： [ -f /etc/hosts ] 判断文件： -f ---> 文件是否存在 -d ---> 目录是否存在 0 存在，1 不存在 判断整数： 等于 equal ---> -eq 不等于 not equal ---> -ne 大于 greater than ---> -gt 大于等于 greater euqal ---> -ge 小于 less than ---> -lt 小于等于 less euqal ---> -le 简单案例 # Shell编程之测试表达式 --- 中括号 # [] 表示判断或测试 [root@NEO scripts]# [ -f /root/alex.oldboy.txt ] # 判断 /root/alex.oldboy.txt 这个文件是否存在 [root@NEO scripts]# echo $? 1 # 1 表示 [ -f /root/alex.oldboy.txt ] 查找的文件不存在， 0 表示存在 [root@NEO scripts]# [ -f /oldboy/oldboy.txt ] [root@NEO scripts]# echo $? 0 [root@NEO scripts]# [ -d /root ] # 判断 /root 这个目录是否存在； -d 判断目录是否存在 ， -f 判断文件是否存在 [root@NEO scripts]# echo $? 0 # 判断整数： [root@NEO scripts]# [ 1 -eq 1 ] [root@NEO scripts]# echo $? 0 # 判断整数的简单案例：判断命令行参数个数等于2 [root@NEO scripts]# sh ./args.sh [root@NEO scripts]# sh ./args.sh a b arg number is 2 [root@NEO scripts]# # 如果 /oldboy 目录不存在则创建 [root@NEO ~]# [ -d /oldboy ] || mkdir -p /oldboy/ # 命令1 || 命令2 ---> || 表示 命令1不成立 则执行 命令2 # 如果 /root/oldboy.txt 存在则提示文件已经存在 [root@NEO ~]# [ -f /oldboy/oldboy.txt ] && echo file exists file exists # Shell编程之 if 判断 # 单分支条件语句： # 语法： if [ 条件 ];then 命令 fi # [] 中括号两端要有两个空格 # 案例：输入2个字，比较大小 # 语法： # if 单分支： [root@NEO scripts]# vim compare.sh [root@NEO scripts]# cat compare.sh #!/bin/bash # desc: # author: neo # time: 20190418 # version: 1.0 num1=$1 num2=$2 if [ $num1 -gt $num2 ];then echo $num1 greater than $num2 fi [root@NEO scripts]# sh compare.sh greater than [root@NEO scripts]# sh compare.sh 10 20 [root@NEO scripts]# sh compare.sh 20 10 20 greater than 10 [root@NEO scripts]# # if 双分支： [root@NEO scripts]# cat compare.sh #!/bin/bash # desc: # author: neo # time: 20190418 # version: 1.0 num1=$1 num2=$2 if [ $num1 -gt $num2 ];then echo $num1 greater than $num2 else echo $num1 less equal $num2 fi [root@NEO scripts]# sh ./compare.sh 10 20 10 less equal 20 [root@NEO scripts]# sh ./compare.sh 20 10 20 greater than 10 [root@NEO scripts]# sh ./compare.sh 20 10 1 3 2 5 7 # 不足之处：后4个参数无用 20 greater than 10 [root@NEO scripts]# sh ./compare.sh 20 ./compare.sh: line 9: [: 20: unary operator expected 20 less equal [root@NEO scripts]# # 参数必须是2个 [root@NEO scripts]# cat compare.sh #!/bin/bash # desc: # author: neo # time: 20190418 # version: 1.0 num1=$1 num2=$2 if [ $# -ne 2 ];then echo "Useage:please input 2 numbers:num1 num2" exit # 退出程序 fi if [ $num1 -gt $num2 ];then echo $num1 greater than $num2 else echo $num1 less equal $num2 fi [root@NEO scripts]# sh compare.sh 10 Useage:please input 2 numbers:num1 num2 [root@NEO scripts]# sh compare.sh 10 20 30 Useage:please input 2 numbers:num1 num2 [root@NEO scripts]# # if 多分支： [root@NEO scripts]# cat compare.sh #!/bin/bash # desc: # author: neo # time: 20190418 # version: 1.0 num1=$1 num2=$2 if [ $# -ne 2 ];then echo "Useage:please input 2 numbers:num1 num2" exit fi if [ $num1 -gt $num2 ];then echo $num1 greater than $num2 elif [ $num1 -lt $num2 ];then echo $num1 less equal $num2 else echo $num1 equal to $num2 fi [root@NEO scripts]# # shell 不太擅长小数
Shell编程之 for 循环
# for 循环语句： # 格式： for 变量名字 in 列表 do 命令 done [root@NEO scripts]# for num in 1 2 3 4 5 > do > echo "the $num number is:"$num > done the 1 number is:1 the 2 number is:2 the 3 number is:3 the 4 number is:4 the 5 number is:5 [root@NEO scripts]# # 优化linux开机启动项目，只保留 crond,sshd,network,rsyslog,sysstat ，其他的都关闭 # 思路： chkconfig 服务 off # 第一步：先排除上面的那几个服务 [root@NEO scripts]# chkconfig |egrep "crond|sshd|network|rsyslog|sysstat" -v # 第二步：取出所有的服务名 [root@NEO scripts]# chkconfig |egrep "crond|sshd|network|rsyslog|sysstat" -v|awk '{print $1}' # for 循环遍历关闭 [root@NEO scripts]# for service in `chkconfig |egrep "crond|sshd|network|rsyslog|sysstat" -v|awk '{print $1}'` > do > echo chkconfig $service off # echo 为了测试 > done