shell总结：读取文件、参数、if、分割字符串、数组长度、空文件、变量赋值、多进程、按行切割文件、查看线程

Reference:

http://saiyaren.iteye.com/blog/1943207

1. Shell 读取文件和写文件

for line in $(<top30000.url.utf-8.http_server_front_hphp.txt); do

tmp_port=8080;

for((i=0;i<=7;i++));do

echo ${line/192.168.12.63/192.168.12.63:$tmp_port} >>top30000.url.utf-8.http_server_front_hphp_mul_port.txt;

tmp_port=$[tmp_port+1]

done;

top30000.url.utf-8.http_server_front_hphp.txt 文件名

通过 < 读取文件 line 是每行的内容

替换文件内容 :

${ 变量 / 被替换内容 / 替换内容 }

替换两边的一定要注意是 {} 不是小括号

输出文件：

echo “xxxx” > 文件名

追加输出文件：

echo “xxxx” >> 文件名

第二种读取方式：

$ cat file | while read line; do echo $line; done

例：

$ cat /root/test.txt | while read line; do

echo $line;

done

输出是：

aaaa

bbbb

cccc dddd

for 的是分割输出

$ for line in $(<file); do echo $line; done

aaaa

bbbb

cccc

dddd

2. shell 参数

sh test.sh 111 222 333

然后再 shell 中获取参数如下获取，如：

$1 是第一个参数 111

$2 是第二个参数 222

$3 是第三个参数 333

依次类推

$0 是 shell 本身

3. Shell if 用法

if [ $1 == "aaa" ]; then

echo $line

if 后需要有空格

[ 需要有空格

$1 后需要有空格

== 后需要有空格

“aaa” 后需要有空格

] 后需要有分号 (;)

; 号后有空格

如果不按照规则，那么会出现如下错误

syntax error near unexpected token `fi' 或是 then 的

shell 的 if else 用法：

if ....; then

....

elif ....; then

....

else

....

当运行下面脚本时，如果 if 后的 $a 不加引号，则会报：

test.sh: line 5: [: too many arguments

这个错误；所以需要先加上“”编程字符串

a="hhvm don't run"

echo $a

if [ "$a" == "hhvm don't run" ]; then

echo "============"

4. shell 分割字符串

#!/bin/bash

str="hello,world,i,like,you,babalala"

arr=(${str//,/ })

for i in ${arr[@]}

echo $i

done

分割成数组 arr ，用逗号分割

方法 2 ：

$ cat split.sh

#!/bin/sh

# Script to split fields into tokens

# Here is the string where tokens separated by colons

s="first column:second column:third column"

ip_arr=()

IFS=":" # Set the field separator

set $s # Breaks the string into $1, $2, ...

i=0

for item # A for loop by default loop through $1, $2, ...

ip_arr=("${ip_arr[@]}" "$item")

echo "Element $i: $item"

((i++))

done

5. Shell 获取数组长度

array=(bill chen bai hu);

num=${#array[@]}

遍历数组：

for((i=0;i<num;i++))

echo ${atrr[$i]};# 这里需要用 {} 引用上才可以

done;

6. shell 创建空文件

:>input_ware_data.txt;

7. Shell 执行命令后给变量赋值

$a=`pwd`;

echo $a

这样就可以输出 pwd 的返回值了

注意这里的引号是键盘 1 左边的那个按钮

8. 使用 wget 和 curl 时出错需要用引号引用 URL

使用 wget 和 curl 时需要用引号引用住 URL

Wget –SO 文件名 “www.baidu.com”

Curl “www.baidu.com”

9. Shell 累加

c=0

for((i=0;i<10;i++));do

#c++;

: $[c++]

echo $c;

done;

这样去实现累加：

: $[c++]

冒号和 $ 之间要有空格

10. Shell 整除

c=90010

echo $((c/1000))

输出 90

11. Shell 赋值

i=$((c/1000));

赋值语句前后不能有空格

12. Shell 多进程

for ((i=0;i<5;i++));do } &

& shell

13. 执行语句后面加上 2>/dev/null 就可以清楚系统的输出信息

如：

Curl www.baidu.com 2>/dev/null

这样就不会输出提示信息了

14. Shell 创建文件夹

mkdir –p [ 文件夹 ]

-p 是递归创建

15. shell 获取时间戳

参考网址：

http://www.2cto.com/os/201109/105312.html

当前时间戳：（年月日时分秒）

a=`date +%Y%m%d%H%M%S`

echo $a;

前 6 天时间戳：（年月日时分秒）

a=`date -d "-6 day" +%Y%m%d%H%M%S`

echo $a;

-d 中可以是 hour , day,week

16. Shell 数组

A=(a b c def)

for i in "${A[@]}"; do

echo $i

done

# 输出 A 的下标

echo ${A[1]}

参考：

http://doudouclever.blog.163.com/blog/static/17511231020127288621354/

17. 获取输入参数数组

for i in "$@"; do

echo $i

done

$@ 是获取的输入参数的数组， $i 是获取的输入的每个参数的值

如 test.sh 1 2 33

输出的内容为：

这就是获取到的 3 个输入参数，输入多少个参数都可以

18. Find 遍历删除

for file in `find . -name "Runtime"`;do

echo "$file==========="

rm -rf $file/*;

ls -l $file;

done;

19. shell 求余

i=$((2000%1000));

echo $i;

用 % 求余

20. Shell 字符串连接

a=”aa”;

a=$a"bb";

echo $a;

输出是 aabb

21. Shell 抽取字符 awk

如日志是这样的：

14.245.173.44 - - [25/Apr/2013:22:24:13 +0800] "GET /ProductPageService.aspx?method=GetCommentSummaryBySkuId&referenceId=1008195527&callback=getCommentCount HTTP

每个空格就是一个位置，那么抽取

/ProductPageService.aspx?method=GetCommentSummaryBySkuId&referenceId=1008195527&callback=getCommentCount

这个就是第 7 位

awk '{print $7}' clubservice_aspx.log >cbs.log

抽取文件 clubservice_aspx.log ，然后输出到 cbs.log 中

详细的见下面的 url

http://hi.baidu.com/ziyingshaozhu/item/8473541d9cf6028488a95681

22. shell 按行切割文件

# 按每个文件 1000 行来分割除

split -l 1000 httperr8007.log httperr

split -l 行数切割的文件生成文件前缀

详细见：

http://blog.sina.com.cn/s/blog_62db9b1901017aiz.html

23. 查找目录下的所有文件

a=`ls cbs`

#echo $a

for file in $a;do

echo $file

done

24. shell 判断为空

1. 变量通过 " " 引号引起来

如下所示 : ，可以得到结果为 IS NULL.

#!/bin/sh

para1=

if [ ! -n "$

echo "IS NULL"

else

echo "NOT NULL"

if [ -z $para1 ];then

echo “is null”

2. 直接通过变量判断

如下所示 : 得到的结果为 : IS NULL

#!/bin/sh

para1=

if [ ! $para1 ]; then

echo "IS NULL"

else

echo "NOT NULL"

3. 使用 test 判断

得到的结果就是 : dmin is not set!

#!/bin/sh

dmin=

if test -z "$dmin" then

echo "dmin is not set!"

else

echo "dmin is set !"

4. 使用 "" 判断

#!/bin/sh

dmin=

if [ "$dmin" = "" ]; then

echo "dmin is not set!"

else

echo "dmin is set !"

详细查看

http://blog.csdn.net/runming918/article/details/7226507

25. shell 逻辑运算符

一、逻辑运算符

逻辑卷标	表示意思
1.	关于档案与目录的侦测逻辑卷标！
-f	常用！侦测『档案』是否存在 eg: if [ -f filename ]
-d	常用！侦测『目录』是否存在
-b	侦测是否为一个『 block 档案』
-c	侦测是否为一个『 character 档案』
-S	侦测是否为一个『 socket 标签档案』
-L	侦测是否为一个『 symbolic link 的档案』
-e	侦测『某个东西』是否存在！
2.	关于程序的逻辑卷标！
-G	侦测是否由 GID 所执行的程序所拥有
-O	侦测是否由 UID 所执行的程序所拥有
-p	侦测是否为程序间传送信息的 name pipe 或是 FIFO （老实说，这个不太懂！）
3.	关于档案的属性侦测！
-r	侦测是否为可读的属性
-w	侦测是否为可以写入的属性
-x	侦测是否为可执行的属性
-s	侦测是否为『非空白档案』
-u	侦测是否具有『 SUID 』的属性
-g	侦测是否具有『 SGID 』的属性
-k	侦测是否具有『 sticky bit 』的属性
4.	两个档案之间的判断与比较；例如 [ test file1 -nt file2 ]
-nt	第一个档案比第二个档案新
-ot	第一个档案比第二个档案旧
-ef	第一个档案与第二个档案为同一个档案（ link 之类的档案）
5.	逻辑的『和 (and) 』『或 (or) 』
&&	逻辑的 AND 的意思
\|\|	逻辑的 OR 的意思

运算符号	代表意义
=	等于应用于：整型或字符串比较如果在 [] 中，只能是字符串
!=	不等于应用于：整型或字符串比较如果在 [] 中，只能是字符串
<	小于应用于：整型比较在 [] 中，不能使用表示字符串
>	大于应用于：整型比较在 [] 中，不能使用表示字符串
-eq	等于应用于：整型比较
-ne	不等于应用于：整型比较
-lt	小于应用于：整型比较
-gt	大于应用于：整型比较
-le	小于或等于应用于：整型比较
-ge	大于或等于应用于：整型比较
-a	双方都成立（ and ）逻辑表达式 –a 逻辑表达式
-o	单方成立（ or ）逻辑表达式 –o 逻辑表达式
-z	空字符串
-n	非空字符串

参考网址：

http://www.cnblogs.com/chengmo/archive/2010/10/01/1839942.html

26. curl 引用 cookie

curl –b test=”aaa” http://club.jd.com

-b name=”value”

Test 是 name

Aaa 是 value

27. 查看进程使用物理内存

Ps aux|grep xxx

查询出 pid

比如 pid 是 11460 那么查询物理内存就如下：

cat /proc/11460/status|grep VmRSS

返回结果：

VmRSS: 190332 kB VmRSS: 190332 kB

28. Grep 不区分大小写

grep –i “aaa”

29. awk 分割字符串

a. log 中的信息为：

a:1

b:2

c:3

…..

然后通过 : 分割，那么 a,b,c 就是 $1;1,2,3 就是 $2
写法如下： -F 后面写上分割的符号

cat a.log|awk -F ':' '{print $1}'

30. 查看线程

ps -eLf|grep hhvm

31. shell 提示符，输入内容进行选择

如提示内容，然后输入 yes no 等等的，然后进入不同分支

while true;do

#stty -icanon min 0 time 100

echo -n "Automatic execute ten seconds after,Are you sure you want to start the task(yes or no)?"

read Arg

case $Arg in

echo "cc"

exit;;

Y|y|YES|yes)

break;;

N|n|NO|no)

exit;;

"") #Autocontinue

break;;

esac

done

echo

echo "others function..."

32. curl 获取 http 状态

http_status=`curl -s -w %{http_code} -o /dev/null -e $REFERER_URL "$line" 2>/dev/null `;

-s 是清楚垃圾信息；

-w

33. Cp 强制覆盖

yes|cp a.txt /export/

用管道线默认确认提示

shell总结：读取文件、参数、if、分割字符串、数组长度、空文件、变量赋值、多进程、按行切割文件、查看线程

Reference:

1. Shell 读取文件和写文件

2. shell 参数

3. Shell if 用法

4. shell 分割字符串

5. Shell 获取数组长度

6. shell 创建空文件

7. Shell 执行命令后给变量赋值

8. 使用 wget 和 curl 时出错需要用引号引用 URL

9. Shell 累加

10. Shell 整除

11. Shell 赋值

12. Shell 多进程

13. 执行语句后面加上 2>/dev/null 就可以清楚系统的输出信息

14. Shell 创建文件夹

15. shell 获取时间戳

16. Shell 数组

17. 获取输入参数数组

18. Find 遍历 删除

19. shell 求余

20. Shell 字符串连接

21. Shell 抽取字符 awk

22. shell 按行切割文件

23. 查找目录下的所有文件

24. shell 判断为空

25. shell 逻辑运算符

26. curl 引用 cookie

27. 查看进程使用物理内存

28. Grep 不区分大小写

29. awk 分割字符串

30. 查看线程

31. shell 提示符，输入内容进行选择

32. curl 获取 http 状态

33. Cp 强制覆盖

18. Find 遍历删除