Python学习记录——Ubuntu(四)计划任务、grep、正则表达式、sed、awk

一.crontab:计划任务

1.参数:

(1)-u user:用来设定某个用户的crontab服务

(2)-e:编辑某个用户的crontab文件内容。如果不指定用户,则表示编辑当前用户的crontab文件

(3)-l:显示某个用户的crontab文件内容,如果不指定用户,则表示显示当前用户的crontab文件内容

(4)-r:从/var/spool/cron目录中删除某个用户的crontab文件,如果不指定用户,则默认删除当前用户的crontab文件

(5)-i:在删除用户的crontab文件时给确认提示

2.格式:*表示星期0~7(其中星期天可以用0或7表示) *表示月份1~12 *表示日期1~31 *表示小时1~23(0表示0点) *表示分钟1~59 每XX用*或者 */1表示  预执行命令(不要超出64字节,如果超出,写成文件以后再用命令:【/bin/bash(指定绝对路径,环境变量失效也可以继续执行) 文件名】 或者在文件开头写上#! /bin/bash 然后用./执行)

二.grep:查找内容

1.格式:

grep 参数 搜索内容 文件名

2.参数:

(1)-c --count #计算符合样式的列数

(2)-l --file-with-matches #列出文件内容符合指定的样式的文件名称。

(3)-v --revert-match #显示不包含匹配文本的所有行。

(4)-i --ignore-case #忽略字符大小写的差别。

(5)-o # 只显示匹配到的关键字

(6)-n # 显示行号

(7)-E  #使用正则表达式

三.正则表达式

1.符号意义:

(1)^ : 匹配开头,放在[]内表示取反,如[^0-9]表示所有非数字

(2)$ : 匹配结尾

(3)[] : 范围匹配

(4)[a-z] : 匹配所有小写字母

(5)[A-Z] : 匹配所有大写字母

(6)[0-9] : 匹配所有数字

(7). : 匹配单个字符

(8)* : 表示*前面的内容(紧邻)出现0次或多次

(9)+ : 表示+前面的内容(紧邻)出现1次或多次

(10)? : 表示?前面的内容(紧邻)出现0次或1次

四.sed:流编辑器,一次处理一行内容

1.格式:sed 参数 动作 文件

2.参数:

(1)-n :使用安静(silent)模式。在一般 sed 的用法中,所有来自 STDIN 的数据一般都会被列出到终端上。但如果加上 -n 参数后,则只有经过sed 特殊处理的那一行(或者动作)才会被列出来

(2)-e :直接在命令列模式上进行 sed 的动作编辑

(3)-f :直接将 sed 的动作写在一个文件内,-f filename 则可以运行 filename 内的 sed 动作(动作比较多时)

(4)-r :sed 的动作支持的是延伸型正规表示法的语法。(默认是基础正规表示法语法,加了-r可以不用转义)

(5)-i :直接修改读取的文件内容,而不是输出到终端。

  动作说明: [n1[,n2]] 动作: n1, n2 :不一定存在,一般代表选择进行动作的行数,比如,如果动作是需要在 10 到 20 行之间进行的,则10,20[动作行为]

3.动作:

(1)a :新增, a 的后面可以接字串,而这些字串会在新的一行出现(目前的下一行)

(2)c :取代, c 的后面可以接字串,这些字串可以取代 n1,n2 之间的行

(3)d :删除,d 后面通常不接任何内容

  eg:

  sed "3d" file(后面省略)  # 删除第三行

  sed "1,3d" # 删除前三行

  sed "1d;3d;5d" # 删除1、3、5行

  sed "/^$/d" #删除空行

  sed "/abc/d" #删除所有含有abc的行

  sed "/abc/,/def/d" #删除abc 和 def 之间的行,包括其自身

  sed "1,/def/d" #删除第一行到 def 之间的行,包括其自身

  sed "/abc/,+3d " # 删除含有abc的行之后,再删除3行

  sed "/abc/,~3d" #从含有abc的行开始,共删除3行

  sed "1~2d" # 从第1行开始,每2行删除一行, 删除奇数行

  sed "2~2d" # 从第2行开始,每2行删除一行, 删除偶数行

  sed "$d" # 删除最后一行

  sed "/dd|cc/d" 删除有dd或者cc的行

(4)i :插入, i 的后面可以接字串,而这些字串会在新的一行出现(目前的上一行);

(5)p :列印,即将某个选择的数据印出。通常 p 会与参数 sed -n 一起运行

  eg:

  sed -n "3p" file # 显示第三行

  sed -n "1,3p" # 显示前三行

  sed -n "2,+3p" # 显示第二行,及后面的三行

  sed -n "$p" # 显示最后一行(特殊意义的字符注意转义)

  sed -n "1p;3p;5p" # 只显示文件1、3、5行

  sed -n "$=" # 显示文件行数

(6)s :替换,可以直接进行取代的工作。通常这个 s 的动作可以搭配正规表示法,例如 1,20s/old/new/g

  eg:

  's/old/new/g' #/g代表这一行只要出现就替换,否则只在第一次出现时替换

  sed "s/(all)/bb/"

  sed -r "s/(all)/bb/"

  sed -r "s/(a)(b)/1XXX2/"  #输出为aXXXb

五.awk :  强大的文本分析工具,对数据分析并生成报告

1.工作方式:简单来说awk就是把文件逐行的读入,以空格为默认分隔符将每行切片,切开的部分再进行各种分析处理。

2.命令行调用方式:awk [-F field-separator] 'commands' input-file(s)

  解释: commands 是真正awk命令,[-F域分隔符]是可选的。 input-file(s) 是待处理的文件。 在awk中,文件的每一行中,由域分隔符分开的每一项称为一个域。通常,在不指名-F域分隔符的情况下,默认的域分隔符是空格。

3.awk工作流程:

  读入有' '换行符分割的一条记录,然后将记录按指定的域分隔符划分域,填充域,$0则表示所有域,$1表示第一个域,$n表示第n个域。默认域分隔符是"空白键" 或 "[tab]键",所以$1表示登录用户,$3表示登录用户ip,以此类推。

4.示例:

(1)cat /etc/passwd |awk -F ':' '{print $1}'

(2)cat /etc/passwd |awk -F ':' '{print $1" "$7}'

5.awk 常用内置变量:

(1)ARGC: 命令行参数个数

(2)ARGV: 命令行参数排列, ARGV[0] ARGV[1]

(3)ENVIRON: 支持队列中系统环境变量的使用

(4)FILENAME: awk浏览的文件名

(5)FNR: 浏览文件的记录数(文件行数)

(6)FS: 设置输入域分隔符,等价于命令行 -F选项

(7)NF: 浏览记录的域的个数

(8)NR: 已读的记录数(所有处理过的内容行数)

(9)OFS: 输出域分隔符

(10)ORS: 输出记录分隔符

(11)RS: 控制记录分隔符

6.统计/etc/passwd:文件名,每行的行号,每行的列数,对应的完整行内容:

  awk -F ':' '{print "filename:" FILENAME ",linenumber:" FNR ",columns:" NF ",linecontent:"$0}' /etc/passwd

7.使用printf替代print,可以让代码更加简洁,易读

  awk -F ':' '{printf("filename:%10s,linenumber:%s,columns:%s,linecontent:%s ",FILENAME,NR,NF,$0)}' /etc/passwd

原文地址:https://www.cnblogs.com/zhoujianlin/p/8455799.html