python_day6

python常用模块及面向对象(一)

一、常用模块之time模块

　　时间模块，import time 导入模块后使用

1、python中时间格式：

a. 时间戳(timestamp)：通常来说，时间戳表示的是从1970年1月1日00:00:00开始按秒计算的偏移量。我们运行“type(time.time())”，返回的是float类型。

b.格式化的时间字符串(Format String)

c.结构化的时间(struct_time)：struct_time元组共有9个元素共九个元素:(年，月，日，时，分，秒，一年中第几周，一年中第几天，夏令时)

 1 import time
 2 #时间戳
 3 print(time.time())  # 结果: 1496626275.947731
 4 
 5 #结构化的时间
 6 print(time.localtime())
 7 print(time.localtime().tm_year)
 8 print(time.gmtime())  # 等同于time.gmtime(time.time())，可以填入时间戳，转换为格林威治时间
 9 '''
10 结果：
11 time.struct_time(tm_year=2017, tm_mon=6, tm_mday=5, tm_hour=9, tm_min=31, tm_sec=15, tm_wday=0, tm_yday=156, tm_isdst=0)
12 2017
13 time.struct_time(tm_year=2017, tm_mon=6, tm_mday=5, tm_hour=1, tm_min=31, tm_sec=15, tm_wday=0, tm_yday=156, tm_isdst=0)
14 '''
15 
16 #格式化的字符串
17 print(time.strftime('%Y-%m-%d %H:%M:%S'))
18 print(time.strftime('%Y-%m-%d %X'))
19 '''
20 结果：
21 2017-06-05 09:35:24
22 2017-06-05 09:35:24
23 '''

View Code

2、时间格式转换关系图

a.timestamp<-->Format String/struct_time

 1 import time
 2 #--------------------------按图1转换时间
 3 # localtime([secs])
 4 # 将一个时间戳转换为当前时区的struct_time。secs参数未提供，则以当前时间为准。
 5 print(time.localtime())
 6 print(time.localtime(1473525444.037215))
 7 '''
 8 结果：
 9 time.struct_time(tm_year=2017, tm_mon=6, tm_mday=5, tm_hour=9, tm_min=57, tm_sec=44, tm_wday=0, tm_yday=156, tm_isdst=0)
10 time.struct_time(tm_year=2016, tm_mon=9, tm_mday=11, tm_hour=0, tm_min=37, tm_sec=24, tm_wday=6, tm_yday=255, tm_isdst=0)
11 '''
12 
13 # gmtime([secs]) 和localtime()方法类似，gmtime()方法是将一个时间戳转换为UTC时区（0时区）的struct_time。
14 
15 # mktime(t) : 将一个struct_time转化为时间戳。
16 print(time.mktime(time.localtime()))#1473525749.0
17 
18 
19 # strftime(format[, t]) : 把一个代表时间的元组或者struct_time（如由time.localtime()和
20 # time.gmtime()返回）转化为格式化的时间字符串。如果t未指定，将传入time.localtime()。如果元组中任何一个
21 # 元素越界，ValueError的错误将会被抛出。
22 print(time.strftime("%Y-%m-%d %X", time.localtime()))#2016-09-11 00:49:56
23 
24 # time.strptime(string[, format])
25 # 把一个格式化时间字符串转化为struct_time。实际上它和strftime()是逆操作。
26 print(time.strptime('2011-05-05 16:37:06', '%Y-%m-%d %X')) 
27 # time.struct_time(tm_year=2011, tm_mon=5, tm_mday=5, tm_hour=16, tm_min=37, tm_sec=6, tm_wday=3, tm_yday=125, tm_isdst=-1)
28 #在这个函数中，format默认为："%a %b %d %H:%M:%S %Y"。

View Code

b.国外一般时间格式转换asctime/cime

 1 import time
 2 #--------------------------按图2转换时间
 3 # asctime([t]) : 把一个表示时间的元组或者struct_time表示为这种形式：'Sun Jun 20 23:21:05 1993'。
 4 # 如果没有参数，将会将time.localtime()作为参数传入。
 5 print(time.asctime())  # Mon Jun  5 10:05:40 2017
 6 
 7 # ctime([secs]) : 把一个时间戳（按秒计算的浮点数）转化为time.asctime()的形式。如果参数未给或者为
 8 # None的时候，将会默认time.time()为参数。它的作用相当于time.asctime(time.localtime(secs))。
 9 print(time.ctime())  # Mon Jun  5 10:05:40 2017
10 print(time.ctime(time.time()))  # Mon Jun  5 10:05:40 2017

View Code

3、struct_time元组元素结构

属性                            值
tm_year（年）                  比如2011 
tm_mon（月）                   1 - 12
tm_mday（日）                  1 - 31
tm_hour（时）                  0 - 23
tm_min（分）                   0 - 59
tm_sec（秒）                   0 - 61
tm_wday（weekday）             0 - 6（0表示周日）
tm_yday（一年中的第几天）        1 - 366
tm_isdst（是否是夏令时）        默认为-1

4、time加减

1 # timestamp加减单位以秒为单位
2 import time
3 t1 = time.time()
4 t2 = t1+10 # 加十秒
5 
6 print(time.ctime(t1))  # Wed Oct 26 21:15:30 2016
7 print(time.ctime(t2))  # Wed Oct 26 21:15:40 2016

View Code

5、其他用法

1 sleep(secs) 线程推迟指定的时间运行，单位为秒。

View Code

二、常用模块之random模块

　　随机取值模块，import random导入使用

1、random模块常用方法

 1 import random
 2 print(random.random())  # (0,1)----float    大于0且小于1之间的小数
 3 print(random.randint(1, 3))  # [1,3]大于等于1且小于等于3之间的整数
 4 print(random.randrange(1, 3))  # (1,3)大于等于1且小于3之间的整数
 5 print(random.choice([1, '23', [4, 5]]))  # 1或者23或者[4,5]
 6 print(random.sample([1, '23', [4, 5]], 2))  # 列表元素任意2个组合
 7 print(random.uniform(1, 3))  # 大于1小于3的小数，如1.927109612082716
 8 
 9 item = [1, 3, 5, 7, 9]
10 random.shuffle(item)  # 打乱item的顺序,相当于"洗牌"
11 print(item)

View Code

2、random模块应用之生成随机验证码

 1 # 方式一
 2 def v_code(n=5):
 3     res = ''
 4     for i in range(n):
 5         num = random.randint(0,9)
 6         s = chr(random.randint(65,90))
 7         add = random.choice([num,s])
 8         res += str(add)
 9     return res
10 print(v_code(6))
11 
12 # 方式2
13 import random, string
14 source = string.digits + string.ascii_lowercase
15 print(''.join(random.sample(source,6)))

View Code

三、常用模块之os模块

　　与操作系统交互的接口模块，import os 导入模块后使用

1、os模块常用方法

 1 1、os模块常用方法
 2 os.getcwd() 获取当前工作目录，即当前python脚本工作的目录路径
 3 os.chdir("dirname")  改变当前脚本工作目录；相当于shell下cd
 4 os.curdir  返回当前目录: ('.')
 5 os.pardir  获取当前目录的父目录字符串名：('..')
 6 os.makedirs('dirname1/dirname2')    可生成多层递归目录
 7 os.removedirs('dirname1')    若目录为空，则删除，并递归到上一级目录，如若也为空，则删除，依此类推
 8 os.mkdir('dirname')    生成单级目录；相当于shell中mkdir dirname
 9 os.rmdir('dirname')    删除单级空目录，若目录不为空则无法删除，报错；相当于shell中rmdir dirname
10 os.listdir('dirname')    列出指定目录下的所有文件和子目录，包括隐藏文件，并以列表方式打印
11 os.remove()  删除一个文件
12 os.rename("oldname","newname")  重命名文件/目录
13 os.stat('path/filename')  获取文件/目录信息
14 os.sep    输出操作系统特定的路径分隔符，win下为"\",Linux下为"/"
15 os.linesep    输出当前平台使用的行终止符，win下为"	
",Linux下为"
"
16 os.pathsep    输出用于分割文件路径的字符串 win下为;,Linux下为:
17 os.name    输出字符串指示当前使用平台。win->'nt'; Linux->'posix'
18 os.system("bash command")  运行shell命令，直接显示
19 os.environ  获取系统环境变量
20 os.path.abspath(path)  返回path规范化的绝对路径
21 os.path.split(path)  将path分割成目录和文件名二元组返回
22 os.path.dirname(path)  返回path的目录。其实就是os.path.split(path)的第一个元素
23 os.path.basename(path)  返回path最后的文件名。如何path以／或结尾，那么就会返回空值。即os.path.split(path)的第二个元素
24 os.path.exists(path)  如果path存在，返回True；如果path不存在，返回False
25 os.path.isabs(path)  如果path是绝对路径，返回True
26 os.path.isfile(path)  如果path是一个存在的文件，返回True。否则返回False
27 os.path.isdir(path)  如果path是一个存在的目录，则返回True。否则返回False
28 os.path.join(path1[, path2[, ...]])  将多个路径组合后返回，第一个绝对路径之前的参数将被忽略
29 os.path.getatime(path)  返回path所指向的文件或者目录的最后存取时间
30 os.path.getmtime(path)  返回path所指向的文件或者目录的最后修改时间
31 os.path.getsize(path) 返回path的大小
32 #在Linux和Mac平台上，该函数会原样返回path，在windows平台上会将路径中所有字符转换为小写，并将所有斜杠转换为饭斜杠。
33 os.path.normcase('c:/windows\system32\')  返回'c:\windows\system32\', 
34 #规范化路径，如..和/
35 os.path.normpath('c://windows\System32\../Temp/') 返回'c:\windows\Temp'
36 ex1：
37 a='/Users/jieli/test1/\a1/\\aa.py/../..'
38 print(os.path.normpath(a))
39 结果：
40 /Users/jieli/test1

View Code

2、os模块应用之系统路径拼接使用

 1 #方式一：推荐使用
 2 import os
 3 #具体应用
 4 import os,sys
 5 possible_topdir = os.path.normpath(os.path.join(
 6     os.path.abspath(__file__),
 7     os.pardir, #上一级
 8     os.pardir,
 9     os.pardir
10 ))
11 sys.path.insert(0,possible_topdir)
12 print(sys.path)
13 
14 #方式二：不推荐使用
15 print(os.path.dirname(os.path.dirname(os.path.dirname(os.path.abspath(__file__)))))
16 '''
17 结果：
18 ['D:\',...]
19 D:
20 '''

View Code

四、常用模块之sys模块

与操作系统交互的接口模块，import sys导入模块后使用, 与os模块配合使用

1、sys模块常用方法

1 '''
2 sys.argv           命令行参数List，第一个元素是程序本身路径
3 sys.exit(n)        退出程序，正常退出时exit(0)
4 sys.version        获取Python解释程序的版本信息
5 sys.maxint         最大的Int值
6 sys.path           返回模块的搜索路径，初始化时使用PYTHONPATH环境变量的值
7 sys.platform       返回操作系统平台名称
8 '''

View Code

2、sys模块应用之进度条

 1 import sys,time
 2 
 3 for i in range(50):
 4     sys.stdout.write('%s
' %('#'*i))
 5     sys.stdout.flush()
 6     time.sleep(0.1)
 7 
 8 '''
 9 注意：在pycharm中执行无效，请到命令行中以脚本的方式执行
10 '''

View Code

五、常用模块之subprocess模块

subprocess意在替代其他几个老的模块或者函数，比如： os.system、os.spawn、os.popen、commands。

a. call执行命令，返回状态码

b. check_call 执行命令，状态码为0返回0，否则抛出异常。

c. check_output 如果状态码为0，返回执行后结果，如果状态码非0，抛出异常。

d. Popen 用于执行更复杂的系统命令。

1、subprocess参数详解

 1 '''
 2 args可是字符串或者序列类型（如：list，元组），如果是字符串，要加上shell=True。
 3 bufsize：指定缓冲。0 无缓冲,1 行缓冲,其他 缓冲区大小,负值 系统缓冲(全缓冲)
 4 stdin, stdout, stderr分别表示程序的标准输入、输出、错误文件句柄。他们可以是PIPE，一个存在的文件描述符或存在的文件对象，也可以设置为None，表示从父进程继承。
 5 preexec_fn只在Unix平台下有效，用于指定一个可执行对象（callable object），它将在子进程运行之前被调用。
 6 Close_sfs：在windows平台下，如果close_fds被设置为True，则新创建的子进程将不会继承父进程的输入、输出、错误管道。所以不能将close_fds设置为True同时重定向子进程的标准输入、输出与错误(stdin, stdout, stderr)。
 7 shell设为true，程序将通过shell来执行。
 8 cwd用于设置子进程的当前目录
 9 env是字典类型，用于指定子进程的环境变量。如果env = None，子进程的环境变量将从父进程中继承。
10 Universal_newlines不同操作系统下，文本的换行符是不一样的。如：windows下用'/r/n'表示换，而Linux下用'/n'。如果将此参数设置为True，Python统一把这些换行符当作'/n'来处理。
11 startupinfo与createionflags只在windows下有效，它们将被传递给底层的CreateProcess()函数，用于设置子进程的一些属性，如：主窗口的外观，进程的优先级等等。
12 '''

View Code

2、subprocess常用方法

 1 '''
 2 Popen.poll()：用于检查子进程是否已经结束。设置并返回returncode属性。
 3 
 4 Popen.wait()：等待子进程结束。设置并返回returncode属性。
 5 
 6 Popen.communicate(input=None)：与子进程进行交互。向stdin发送数据，或从stdout和stderr中读取数据。可选参数input指定发送到子进程的参数。Communicate()返回一个元组：(stdoutdata, stderrdata)。注意：如果希望通过进程的stdin向其发送数据，在创建Popen对象的时候，参数stdin必须被设置为PIPE。同样，如果希望从stdout和stderr获取数据，必须将stdout和stderr设置为PIPE。
 7 
 8 Popen.send_signal(signal)：向子进程发送信号。
 9 
10 Popen.terminate()：停止(stop)子进程。在windows平台下，该方法将调用Windows API TerminateProcess（）来结束子进程。
11 
12 Popen.kill()：杀死子进程。
13 
14 Popen.stdin：如果在创建Popen对象是，参数stdin被设置为PIPE，Popen.stdin将返回一个文件对象用于策子进程发送指令。否则返回None。
15 
16 Popen.stdout：如果在创建Popen对象是，参数stdout被设置为PIPE，Popen.stdout将返回一个文件对象用于策子进程发送指令。否则返回None。
17 
18 Popen.stderr：如果在创建Popen对象是，参数stdout被设置为PIPE，Popen.stdout将返回一个文件对象用于策子进程发送指令。否则返回None。
19 
20 Popen.pid：获取子进程的进程ID。
21 
22 Popen.returncode：获取进程的返回值。如果进程还没有结束，返回None。
23 
24 subprocess.call(*popenargs, **kwargs)：运行命令。该函数将一直等待到子进程运行结束，并返回进程的returncode。文章一开始的例子就演示了call函数。如果子进程不需要进行交互,就可以使用该函数来创建。
25 
26 subprocess.check_call(*popenargs, **kwargs)：与subprocess.call(*popenargs, **kwargs)功能一样，只是如果子进程返回的returncode不为0的话，将触发CalledProcessError异常。在异常对象中，包括进程的returncode信息。
27 '''

View Code

3、subprocess应用之管道

 1 import subprocess
 2 
 3 # res=subprocess.Popen('diasdfasdfr',shell=True,
 4 #                      stderr=subprocess.PIPE,
 5 #                      stdout=subprocess.PIPE)
 6 
 7 # print('=====>',res.stdout.read())
 8 # print('=====>',res.stderr.read().decode('gbk'))
 9 
10 
11 #ls |grep txt$
12 res1=subprocess.Popen(r'dir E:wupeiqis17day06',shell=True,stdout=subprocess.PIPE)
13 # print(res1.stdout.read())
14 
15 res=subprocess.Popen(r'findstr txt*',shell=True,
16                      stdin=res1.stdout,
17                      stderr=subprocess.PIPE,
18                      stdout=subprocess.PIPE)
19 
20 print('===>',res.stdout.read().decode('gbk')) # 管道取一次就空了
21 # print('===>',res.stdout.read().decode('gbk'))
22 # print('===>',res.stdout.read().decode('gbk'))
23 # print('===>',res.stdout.read().decode('gbk'))
24 # print('===>',res.stdout.read().decode('gbk'))
25 # print('===>',res.stdout.read().decode('gbk'))
26 # print('===>',res.stdout.read().decode('gbk'))

View Code

六、常用模块之json模块

json、pickle、shuelve为python提供的用于序列化的模块，eval内置方法可以将一个字符串转成python对象，不过，eval方法是有局限性的，对于普通的数据类型，json.loads和eval都能用，但遇到特殊类型的时候，eval就不管用了,所以eval的重点还是通常用来执行一个字符串表达式，并返回表达式的值。

import json 导入模块后使用

1、序列化概念：

我们把对象(变量)从内存中变成可存储或传输的过程称之为序列化，在Python中叫pickling，在其他语言中也被称之为serialization，marshalling，flattening等等，都是一个意思。

2、为什么要用序列化：

a. 保证系统和应用的用户操作状态

b. 跨平台数据交互

3、json序列化：

如果我们要在不同的编程语言之间传递对象，就必须把对象序列化为标准格式，比如XML，但更好的方法是序列化为JSON，因为JSON表示出来就是一个字符串，可以被所有语言读取，也可以方便地存储到磁盘或者通过网络传输。JSON不仅是标准格式，并且比XML更快，而且可以直接在Web页面中读取，非常方便。

JSON表示的对象就是标准的JavaScript语言的对象，JSON和Python内置的数据类型对应如下：

4、python的json应用流程图：

 1 import json
 2 dic = {
 3     'name':'alex',
 4     'age':9000,
 5     'height':'150cm',
 6 }
 7 
 8 # 写入dumps
 9 res = json.dumps(dic)
10 with open('a.json', 'w') as f:
11      f.write(res)
12 
13 # 读取loads
14 with open('a.json', 'r') as f:
15     dic = json.loads(f.read())
16     print(dic, type(dic))

View Code

简单写法：

1 import json
2 dic = {
3     'name':'alex',
4     'age':9000,
5     'height':'150cm',
6 }
7 # json.dump(dic,open('a.json', 'w')) 写入dump
8 # res = json.load(open('a.json', 'r')) 读取/赋值load
9 # print(res)

View Code

ps.注意''and""：无论数据是怎样创建的，只要满足json格式，就可以json.loads出来,不一定非要dumps的数据才能loads

1 import json
2 #dct="{'1':111}"#json 不认单引号
3 #dct=str({"1":111})#报错,因为生成的数据还是单引号:{'one': 1}
4 
5 dct='{"1":"111"}'
6 print(json.loads(dct))
7 
8 #conclusion:
9 #        无论数据是怎样创建的，只要满足json格式，就可以json.loads出来,不一定非要dumps的数据才能loads

View Code

七、常用模块之pickle模块

import pickle 导入模块后使用，仅仅能对python数据类型进行序列化，不能满足跨平台数据交互

1、pickle应用流程图：

 1 import pickle
 2  
 3 dic={'name':'alvin','age':23,'sex':'male'}
 4  
 5 print(type(dic))#<class 'dict'>
 6  
 7 j=pickle.dumps(dic)
 8 print(type(j))#<class 'bytes'>
 9  
10  
11 f=open('序列化对象_pickle','wb')#注意是w是写入str,wb是写入bytes,j是'bytes'
12 f.write(j)  #-------------------等价于pickle.dump(dic,f)
13  
14 f.close()
15 #-------------------------反序列化
16 import pickle
17 f=open('序列化对象_pickle','rb')
18  
19 data=pickle.loads(f.read())#  等价于data=pickle.load(f)
20  
21  
22 print(data['age'])

View Code

ps.Pickle的问题和所有其他编程语言特有的序列化问题一样，就是它只能用于Python，并且可能不同版本的Python彼此都不兼容，因此，只能用Pickle保存那些不重要的数据，不能成功地反序列化也没关系。

2、pickle应用局限性：

a.pickle不能与json通用（pickle序列化后，内容为python的字节码）

b.pickle序列化def函数时，子序列化执行函数时的内存地址，程序结束后，def函数内存地址失效，不能被再次调用。

 1 # a.pickle不能与json通用（pickle序列化后，内容为python的字节码）
 2 import json
 3 import pickle
 4 # def func():
 5 #     print('from func')
 6 
 7 # json.dumps(func)# 报错，json不支持python的函数类型
 8 # f=pickle.dumps(func)
 9 # print(f)
10 
11 # pickle序列化def函数时，子序列化执行函数时的内存地址，程序结束后，def函数内存地址失效，不能被再次调用。
12 import json
13 import pickle
14 # def func():
15 #     print('from func')
16 # pickle.dump(func,open('c.pkl','wb'))
17 # res=pickle.load(open('c.pkl','rb'))
18 # print(res)
19 # res()

View Code

八、常用模块之shuelve模块

import shuelve 导入模块后使用，仅仅能对python数据类型进行序列化，不能满足跨平台数据交互。shelve模块比pickle模块简单，只有一个open函数，返回类似字典的对象，可读可写;key必须为字符串，而值可以是python所支持的数据类型。shelve其实用anydbm去创建DB并且管理持久化对象的。

1 import shelve
2 
3 f=shelve.open(r'sheve.txt')
4 f['stu1_info']={'name':'egon','age':18,'hobby':['piao','smoking','drinking']}
5 f['stu2_info']={'name':'gangdan','age':53}
6 f['school_info']={'website':'http://www.pypy.org','city':'beijing'}
7 
8 print(f['stu1_info']['hobby'])
9 f.close()

View Code

结果：

['piao', 'smoking', 'drinking']

九、常用模块之xml模块

　　xml是实现不同语言或程序之间进行数据交换的协议，跟json差不多，但json使用起来更简单，不过，古时候，在json还没诞生的黑暗年代，大家只能选择用xml呀，至今很多传统公司如金融行业的很多系统的接口还主要是xml。xml的格式如下，就是通过<>节点来区别数据结构的:

 1 <?xml version="1.0"?>
 2 <data>
 3     <country name="Liechtenstein">
 4         <rank updated="yes">2</rank>
 5         <year>2008</year>
 6         <gdppc>141100</gdppc>
 7         <neighbor name="Austria" direction="E"/>
 8         <neighbor name="Switzerland" direction="W"/>
 9     </country>
10     <country name="Singapore">
11         <rank updated="yes">5</rank>
12         <year>2011</year>
13         <gdppc>59900</gdppc>
14         <neighbor name="Malaysia" direction="N"/>
15     </country>
16     <country name="Panama">
17         <rank updated="yes">69</rank>
18         <year>2011</year>
19         <gdppc>13600</gdppc>
20         <neighbor name="Costa Rica" direction="W"/>
21         <neighbor name="Colombia" direction="E"/>
22     </country>
23 </data>
24 
25 xml示例

View Code

1、遍历XML文档的所有内容

 1 from xml.etree import ElementTree as ET
 2 
 3 ############ 解析方式一 ############
 4 """
 5 # 打开文件，读取XML内容
 6 str_xml = open('xo.xml', 'r').read()
 7 
 8 # 将字符串解析成xml特殊对象，root代指xml文件的根节点
 9 root = ET.XML(str_xml)
10 # 全文搜索
11 # print(root.iter('year'))
12 # 在root的子节点找，只找一个
13 # print(root.find('country'))
14 # 在root的子节点找，找所有
15 # print(root.findall('country')) 
16 """
17 ############ 解析方式二 ############
18 
19 # 直接解析xml文件
20 tree = ET.parse("test.xml")
21 # 获取xml文件的根节点
22 root = tree.getroot()
23 ### 操作
24 # 顶层标签
25 print(root.tag)
26 # 遍历XML文档的第二层
27 for child in root:
28     # 第二层节点的标签名称和标签属性
29     print(child.tag, child.attrib)
30     # 遍历XML文档的第三层
31     for i in child:
32         # 第二层节点的标签名称和内容
33         print(i.tag,i.text)
34 '''
35 data
36 country {'name': 'Liechtenstein'}
37 rank 2
38 year 2008
39 gdppc 141100
40 neighbor None
41 neighbor None
42 country {'name': 'Singapore'}
43 rank 5
44 year 2011
45 gdppc 59900
46 neighbor None
47 country {'name': 'Panama'}
48 rank 69
49 year 2011
50 gdppc 13600
51 neighbor None
52 neighbor None
53 '''

View Code

2、遍历XML中指定的节点

 1 '''
 2 2、遍历XML中指定的节点
 3 '''
 4 from xml.etree import ElementTree as ET
 5 ############ 解析方式一 ############
 6 # 直接解析xml文件
 7 tree = ET.parse("test.xml")
 8 # 获取xml文件的根节点
 9 root = tree.getroot()
10 ### 操作
11 
12 # 顶层标签
13 print(root.tag)
14 
15 # 遍历XML中所有的year节点
16 for node in root.iter('year'):
17     # 节点的标签名称和内容
18     print(node.tag, node.text)
19 '''
20 结果：
21 data
22 year 2008
23 year 2011
24 year 2011
25 '''

View Code

3、修改节点内容

a.解析字符串方式，修改，保存

 1 from xml.etree import ElementTree as ET
 2 
 3 ############ 解析方式一 ############
 4 
 5 # 打开文件，读取XML内容
 6 str_xml = open('test.xml', 'r').read()
 7 # 将字符串解析成xml特殊对象，root代指xml文件的根节点
 8 root = ET.XML(str_xml)
 9 ############ 操作 ############
10 # 顶层标签
11 print(root.tag)
12 
13 # 循环所有的year节点
14 for node in root.iter('year'):
15     # 将year节点中的内容自增一
16     new_year = int(node.text) + 1
17     node.text = str(new_year)
18 
19     # 设置属性
20     node.set('name', 'alex')
21     node.set('age', '18')
22     # 删除属性
23     del node.attrib['name']
24 
25 
26 ############ 保存文件 ############
27 # 因为root是ElementTree.Element对象，没有write方法，只有ElementTree有write方法，可以将root对应的内存地址内容
28 # 传给ElementTree，实例化成ElementTree对象，就有write方法了
29 tree = ET.ElementTree(root)
30 tree.write("text_new.xml", encoding='utf-8')  # 如果更改内容有中文就需要指定编码了
31 
32 '''
33 结果：
34 cat text_new.xml
35 <year age="18">2009</year>
36 '''

View Code

b.解析文件方式，修改，保存

 1 from xml.etree import ElementTree as ET
 2 
 3 ############ 解析方式二 ############
 4 
 5 # 直接解析xml文件
 6 tree = ET.parse("test.xml")
 7 # 获取xml文件的根节点
 8 root = tree.getroot()
 9 ############ 操作 ############
10 
11 # 顶层标签
12 print(root.tag)
13 # 循环所有的year节点
14 for node in root.iter('year'):
15     # 将year节点中的内容自增一
16     new_year = int(node.text) + 1
17     node.text = str(new_year)
18     # 设置属性
19     node.set('name', 'alex')
20     node.set('age', '18')
21     # 删除属性
22     del node.attrib['name']
23 
24 
25 ############ 保存文件 ############
26 tree.write("newnew.xml", encoding='utf-8')

View Code

4、删除节点

a.解析字符串方式打开，删除，保存

from xml.etree import ElementTree as ET

############ 解析字符串方式打开 ############

# 打开文件，读取XML内容
str_xml = open('test.xml', 'r').read()
# 将字符串解析成xml特殊对象，root代指xml文件的根节点
root = ET.XML(str_xml)
############ 操作 ############
# 顶层标签
print(root.tag)
# 遍历data下的所有country节点
for country in root.findall('country'):
    # 获取每一个country节点下rank节点的内容
    rank = int(country.find('rank').text)
    if rank > 50:
        # 删除指定country节点
        root.remove(country)
############ 保存文件 ############
tree = ET.ElementTree(root)
tree.write("test_new.xml", encoding='utf-8')

View Code

b.解析文件方式打开，删除，保存

 1 from xml.etree import ElementTree as ET
 2 
 3 ############ 解析文件方式 ############
 4 
 5 # 直接解析xml文件
 6 tree = ET.parse("test.xml")
 7 
 8 # 获取xml文件的根节点
 9 root = tree.getroot()
10 
11 ############ 操作 ############
12 
13 # 顶层标签
14 print(root.tag)
15 
16 # 遍历data下的所有country节点
17 for country in root.findall('country'):
18     # 获取每一个country节点下rank节点的内容
19     rank = int(country.find('rank').text)
20 
21     if rank > 50:
22         # 删除指定country节点
23         root.remove(country)
24 
25 ############ 保存文件 ############
26 tree.write("newnew.xml", encoding='utf-8')

View Code

5、创建xml文件:类型str 等类创建字符串有两种方式生成 a = 'name' a = str("name")

a.创建方式（一）:类 Element（标签，{属性：值}）

 1 # 方式一
 2 from xml.etree import ElementTree as ET
 3 # 创建根节点
 4 root = ET.Element("famliy")
 5 # 创建节点大儿子
 6 son1 = ET.Element('son', {'name': '儿1'})
 7 # 创建小儿子
 8 son2 = ET.Element('son', {"name": '儿2'})
 9 # 在大儿子中创建两个孙子
10 grandson1 = ET.Element('grandson', {'name': '儿11'})
11 grandson2 = ET.Element('grandson', {'name': '儿12'})
12 son1.append(grandson1)
13 son1.append(grandson2)
14 # 把儿子添加到根节点中
15 root.append(son1)
16 root.append(son1)
17 tree = ET.ElementTree(root)
18 tree.write('test_new.xml',encoding='utf-8', short_empty_elements=False)

View Code

 1 # 已有文件，二次创建子节点
 2 from xml.etree import ElementTree as ET
 3 tree = ET.parse("first.xml")  # 直接解析xml格式文件
 4 root = tree.getroot() #利用getroot方法获取根节点
 5 # print(root.tag)
 6 # print(root.attrib)
 7 # print(root.text)
 8 # 同 字符串创建的两种方式来看 xml也有两种方式创建
 9 # 利用　Element类直接创建  ======
10 son = ET.Element("Biaoqian2",{"key":"value"})
11 son.text="zhi"
12 ele1 = ET.Element("qq",key2="value2", )
13 ele1.text="woshizhi"
14 root.append(son)
15 son.append(ele1)
16 tree.write("out2.xml")

View Code

b.创建方式（二）:利用 makeelement创建 Element类的对象创建一个新文件

 1 # 方式二
 2 from xml.etree import ElementTree as ET
 3 # 创建根节点
 4 root = ET.Element("famliy")
 5 # 创建大儿子
 6 # son1 = ET.Element('son', {'name': '儿1'})
 7 son1 = root.makeelement('son', {'name': '儿1'})
 8 # 创建小儿子
 9 # son2 = ET.Element('son', {"name": '儿2'})
10 son2 = root.makeelement('son', {"name": '儿2'})
11 # 在大儿子中创建两个孙子
12 # grandson1 = ET.Element('grandson', {'name': '儿11'})
13 grandson1 = son1.makeelement('grandson', {'name': '儿11'})
14 # grandson2 = ET.Element('grandson', {'name': '儿12'})
15 grandson2 = son1.makeelement('grandson', {'name': '儿12'})
16 son1.append(grandson1)
17 son1.append(grandson2)
18 # 把儿子添加到根节点中
19 root.append(son1)
20 root.append(son1)
21 tree = ET.ElementTree(root)
22 tree.write('oooo.xml',encoding='utf-8', short_empty_elements=False)

View Code

 1 # 已有文件，二次创建子节点
 2 from xml.etree import ElementTree as ET
 3 tree = ET.parse("first.xml")  # 直接解析xml格式文件
 4 
 5 root = tree.getroot() #利用getroot方法获取根节点
 6 print(root.tag)
 7 print(root.attrib)
 8 print(root.text)
 9 
10 # 同 字符串创建的两种方式来看 xml也有两种方式创建
11 #
12 # 1 利用 makeelement创建 Element类的对象  =====
13 son = root.makeelement("biaoqian",{"key":"value"})
14 
15 s = son.makeelement("biaoqian2",{"key2":"value"})  #Element类的对象
16 
17 son.append(s) #传入根的儿子的儿子
18 root.append(son)  # 传入根节点下，作为儿子
19 
20 tree.write("out.xml")

View Code

c.创建方式（三）:SubElement创建

 1 from xml.etree import ElementTree as ET
 2 
 3 
 4 # 创建根节点
 5 root = ET.Element("famliy")
 6 
 7 
 8 # 创建节点大儿子
 9 son1 = ET.SubElement(root, "son", attrib={'name': '儿1'})
10 # 创建小儿子
11 son2 = ET.SubElement(root, "son", attrib={"name": "儿2"})
12 
13 # 在大儿子中创建一个孙子
14 grandson1 = ET.SubElement(son1, "age", attrib={'name': '儿11'})
15 grandson1.text = '孙子'
16 
17 
18 et = ET.ElementTree(root)  #生成文档对象
19 et.write("test.xml", encoding="utf-8", xml_declaration=True, short_empty_elements=False)

View Code

6、将生成的xml的标签加缩进后写入新文件

由于原生保存的XML时默认无缩进，如果想要设置缩进的话，需要修改保存方式：

 1 from xml.etree import ElementTree as ET
 2 from xml.dom import minidom
 3 
 4 
 5 def prettify(elem):
 6     """将节点转换成字符串，并添加缩进。
 7     """
 8     rough_string = ET.tostring(elem, 'utf-8')
 9     reparsed = minidom.parseString(rough_string)
10     return reparsed.toprettyxml(indent="	")
11 
12 # 创建根节点
13 root = ET.Element("famliy")
14 
15 
16 # 创建大儿子
17 # son1 = ET.Element('son', {'name': '儿1'})
18 son1 = root.makeelement('son', {'name': '儿1'})
19 # 创建小儿子
20 # son2 = ET.Element('son', {"name": '儿2'})
21 son2 = root.makeelement('son', {"name": '儿2'})
22 
23 # 在大儿子中创建两个孙子
24 # grandson1 = ET.Element('grandson', {'name': '儿11'})
25 grandson1 = son1.makeelement('grandson', {'name': '儿11'})
26 # grandson2 = ET.Element('grandson', {'name': '儿12'})
27 grandson2 = son1.makeelement('grandson', {'name': '儿12'})
28 
29 son1.append(grandson1)
30 son1.append(grandson2)
31 
32 
33 # 把儿子添加到根节点中
34 root.append(son1)
35 root.append(son1)
36 
37 
38 raw_str = prettify(root)
39 
40 f = open("xxxoo.xml",'w',encoding='utf-8')
41 f.write(raw_str)
42 f.close()

View Code

优化封装写入文件

 1 # 函数封装了 缩进和写入文件的功能
 2 from xml.etree import ElementTree as ET
 3 from xml.dom import minidom
 4 
 5 def MyWrite(root, file_path):
 6 
 7     rough_string = ET.tostring(root, 'utf-8')
 8     reparsed = minidom.parseString(rough_string)
 9     new_str = reparsed.toprettyxml(indent="	")
10     f = open(file_path, 'w', encoding='utf-8')
11     f.write(new_str)
12     f.close()
13 
14 root = ET.Element('family', {"age": "18"})
15 
16 # son = ET.Element('family', {"age": "18"})
17 # son = root.makeelement('family', {"age": "18"})
18 # root.append(son)
19 ET.SubElement(root,'family', {"age": "19"})
20 son = ET.SubElement(root,'family', {"age": "十一"})
21 ET.SubElement(son,'family', {"age": "1"})
22 
23 # tree = ET.ElementTree(root)
24 # tree.write("out.xml", encoding='utf-8', short_empty_elements=False)
25 # tree.write("out.xml", encoding='utf-8', xml_declaration=True)
26 # ET.tostring()
27 
28 MyWrite(root, "nnnnn.xml")

View Code

十、常用模块之configparser模块

configparser用于处理特定格式的文件，其本质上是利用open来操作文件。import configparser之后调用

配置文件：

 1 # 注释1
 2 ; 注释2
 3 
 4 [section1]
 5 k1 = v1
 6 k2:v2
 7 user=egon
 8 age=18
 9 is_admin=true
10 salary=31
11 
12 [section2]
13 k1 = v1

View Code

1、获取所有节点

1 import configparser
2 obj = configparser.ConfigParser() # 创建编辑对象
3  
4  obj.read("test.conf",encoding="utf-8") #读取 文件
5  ret = obj.sections() # 选项
6  print(ret)

View Code

2、获取指定节点下所有的键值对

1 import configparser
2 
3 # 获取指定节点下的键值
4 obj = configparser.ConfigParser() # 创建编辑对象
5 
6 obj.read("ini",encoding="utf-8") #读取 文件
7 ret = obj.items("mysql") # 键值 # [('client_ip', '10.0.0.1'), ('port', '3306')]
8 print(ret)

View Code

3、获取指定节点下所有的建

1  import configparser
2  obj = configparser.ConfigParser() # 创建编辑对象
3  obj.read("ini",encoding="utf-8") #读取 文件
4  ret = obj.options("mysql") # 选项下的key ['client_ip', 'port']
5  print(ret)

View Code

4、获取指定节点下指定key的值

1 obj = configparser.ConfigParser() # 创建编辑对象
2 
3 obj.read("ini",encoding="utf-8") #读取 文件
4 ret = obj.get("mysql","client_ip") # 选项下的key 10.0.0.1
5 # ret = obj.getint("mysql","client_ip") # 选项下的key 10.0.0.1
6 # ret = obj.getfloat("mysql","client_ip") # 选项下的key 值为float类型
7 # ret = obj.getboolean("mysql","client_ip") # 选项下的的所有key必须都是布尔类型
8 print(ret)

View Code

ps.

ret = obj.getfloat("mysql","client_ip") # 选项下的key 值为float类型
ret = obj.getboolean("mysql","client_ip") # 选项下的的所有key必须是布尔类型

5、检查、删除、添加节点

 1 import configparser
 2 # 检查 删除 添加节点
 3 obj = configparser.ConfigParser() # 创建编辑对象
 4 obj.read("ini",encoding="utf-8") #读取 文件
 5 
 6 # 检查
 7 has_sec =  obj.has_section("mysql1") # false
 8 print(has_sec)
 9 
10 # 添加节点
11 obj.add_section("liujianzuo")
12 obj.add_section("liujianzuo1")
13 obj.add_section("liujianzuo2")
14 obj.write(open("ini","w",encoding="utf-8")) # ['section1', 'section2', 'mysql', 'mysqld', 'liujianzuo', 'liujianzuo1', 'liujianzuo2']
15 obj.read("ini",encoding="utf-8")
16 ret = obj.sections()
17 print(ret)
18 # 删除节点
19 obj.remove_section("liujianzuo")
20 obj.remove_section("liujianzuo1")
21 obj.write(open("ini","w",encoding="utf-8")) # ['section1', 'section2', 'mysql', 'mysqld', 'liujianzuo2']
22 obj.read("ini",encoding="utf-8")
23 ret = obj.sections()
24 print(ret)

View Code

6、检查、删除、设置指定组内的键值对

 1 import configparser
 2 # 检查 删除 添加 指定组内的键值对
 3 
 4 obj = configparser.ConfigParser() # 创建编辑对象
 5 obj.read("ini",encoding="utf-8") #读取 文件
 6 
 7 # 检查
 8 has_opt = obj.has_option("mysql","port")
 9 print(has_opt)
10 
11 # 删除
12 obj.remove_option("mysql","port")
13 obj.write(open("ini","w",encoding="utf-8"))
14 ret = obj.sections()
15 print(ret)
16 
17 # # 设置
18 obj.set("mysql","port","4444")
19 obj.write(open("ini","w",encoding="utf-8"))
20 ret = obj.values()
21 print(ret)

View Code

十一、常用模块之hashlib模块

　　用于加密数据，对比认证。import hashlib之后调用

1、hash：一种算法 ,3.x里代替了md5模块和sha模块，主要提供 SHA1, SHA224, SHA256, SHA384, SHA512 ，MD5 算法。

2、hash特点：

a.内容相同则hash运算结果相同，内容稍微改变则hash值则变
b.不可逆推
c.相同算法：无论校验多长的数据，得到的哈希值长度固定。

3、hashlib用法

 1 import hashlib
 2 
 3 m = hashlib.md5()  # m=hashlib.sha256()
 4 
 5 m.update('hello'.encode('utf8'))
 6 print(m.hexdigest())  # 5d41402abc4b2a76b9719d911017c592
 7 
 8 m.update('alvin'.encode('utf8'))
 9 
10 print(m.hexdigest())  # 92a7e713c30abbb0319fa07da2a5c4af
11 
12 m2 = hashlib.md5()
13 m2.update('helloalvin'.encode('utf8'))
14 print(m2.hexdigest())  # 92a7e713c30abbb0319fa07da2a5c4af

View Code

ps.
注意：把一段很长的数据update多次，与一次update这段长数据，得到的结果一样
但是update多次为校验大文件提供了可能。

4、加盐及模拟撞库反解密

以上加密算法虽然依然非常厉害，但时候存在缺陷，即：通过撞库可以反解。所以，有必要对加密算法中添加自定义key再来做加密。

a.加盐

 1 import hashlib
 2 # ######## md5 ########
 3 # hash = hashlib.md5('898oaFs09f')
 4 ######## 256 ########
 5 hash = hashlib.sha256('898oaFs09f'.encode('utf8')) # 加盐
 6 hash.update('admin')  # 更新哈希对象以字符串参数 其实就是你的明文密码
 7 
 8 # import hashlib
 9 #
10 # obj = hashlib.md5(
11 #     bytes("salt;%#%salt", encoding="utf-8"))  # 这里是输入的盐值  ##创建hash对象，md5:(message-Digest Algorithm 5)消息摘要算法,得出一个128位的密文
12 # print(obj)  # <md5 HASH object @ 0x0000000000A1F800>
13 # obj.update(bytes("mypasswd123", encoding="utf-8"))  # 更新哈希对象以字符串参数 其实就是你的明文密码
14 # print(obj.digest())  ##返回摘要，作为二进制数据字符串值  b'x04x80)x17\xf8dPAxbcxd9@exeb&x0f'
15 # print(obj.hexdigest())  # 返回十六进制数字字符串  048029175cf8645041bcd94065eb260f

View Code

b.模拟撞库反解密

5、 hmac 模块:消息认证算法：MAC (Message Authentication Codes) 消息认证码

python 还有一个 hmac 模块，它内部对我们创建 key 和内容进行进一步的处理然后再加密

1  import hmac
2 h = hmac.new('wueiqi')
3 h.update('hellowo')
4  print h.hexdigest()

View Code

十二、常用模块之logging模块

用于便捷记录日志且线程安全的模块。import logging之后调用

1、日志级别种类：

CRITICAL = 50
FATAL = CRITICAL
ERROR = 40
WARNING = 30
WARN = WARNING
INFO = 20
DEBUG = 10
NOTSET = 0

2、日志模块写法

a.如果不指定filename,则默认打印到终端
b.指定日志级别:

指定方式:

1:level=10
2:level=logging.ERROR

c.指定日志级别为ERROR,则只有ERROR及其以上级别的日志会被打印

 1 import logging
 2 
 3 logging.basicConfig(filename='access.log',
 4                     format='%(asctime)s - %(name)s - %(levelname)s -%(module)s:  %(message)s',
 5                     datefmt='%Y-%m-%d %H:%M:%S %p',
 6                     level=10)
 7 
 8 logging.debug('debug')
 9 logging.info('info')
10 logging.warning('warning')
11 logging.error('error')
12 logging.critical('critical')
13 logging.log(10,'log') #如果level=40,则只有logging.critical和loggin.error的日志会被打印

View Code

3、日志模块可用参数

可在logging.basicConfig()函数中通过具体参数来更改logging模块默认行为，可用参数有
filename：用指定的文件名创建FiledHandler（后边会具体讲解handler的概念），这样日志会被存储在指定的文件中。
filemode：文件打开方式，在指定了filename时使用这个参数，默认值为“a”还可指定为“w”。
format：指定handler使用的日志显示格式。
datefmt：指定日期时间格式。
level：设置rootlogger（后边会讲解具体概念）的日志级别
stream：用指定的stream创建StreamHandler。可以指定输出到sys.stderr,sys.stdout或者文件，默认为sys.stderr。若同时列出了filename和stream两个参数，则stream参数会被忽略。点击查看更详细

4、日志格式详细:

%(name)s	Logger的名字，并非用户名，详细查看
%(levelno)s	数字形式的日志级别
%(levelname)s	文本形式的日志级别
%(pathname)s	调用日志输出函数的模块的完整路径名，可能没有
%(filename)s	调用日志输出函数的模块的文件名
%(module)s	调用日志输出函数的模块名
%(funcName)s	调用日志输出函数的函数名
%(lineno)d	调用日志输出函数的语句所在的代码行
%(created)f	当前时间，用UNIX标准的表示时间的浮点数表示
%(relativeCreated)d	输出日志信息时的，自Logger创建以来的毫秒数
%(asctime)s	字符串形式的当前时间。默认格式是 “2003-07-08 16:49:45,896”。逗号后面的是毫秒
%(thread)d	线程ID。可能没有
%(threadName)s	线程名。可能没有
%(process)d	进程ID。可能没有
%(message)s	用户输出的消息

应用

  1 #! /usr/bin/env python
  2 # -*- coding: utf-8 -*-
  3 # __author__ = "Q1mi"
  4 
  5 """
  6 logging配置
  7 """
  8 
  9 import os
 10 import logging.config
 11 
 12 # 定义三种日志输出格式 开始
 13 
 14 standard_format = '[%(asctime) -s][%(threadName)s:%(thread)d][task_id:%(name)s][%(filename)s:%(lineno)d]' 
 15                   '[%(levelname)s][%(message)s]'
 16 
 17 simple_format = '[%(levelname)s][%(asctime)s][%(filename)s:%(lineno)d]%(message)s'
 18 
 19 id_simple_format = '[%(levelname)s][%(asctime)s] %(message)s'
 20 
 21 # 定义日志输出格式 结束
 22 
 23 logfile_dir = os.path.dirname(os.path.abspath(__file__))  # log文件的目录
 24 
 25 logfile_name = 'all2.log'  # log文件名
 26 
 27 # 如果不存在定义的日志目录就创建一个
 28 if not os.path.isdir(logfile_dir):
 29     os.mkdir(logfile_dir)
 30 
 31 # log文件的全路径
 32 logfile_path = os.path.join(logfile_dir, logfile_name)
 33 
 34 # log配置字典
 35 LOGGING_DIC = {
 36     'version': 1,
 37     'disable_existing_loggers': False,
 38     'formatters': {
 39         'standard': {
 40             'format': standard_format,
 41             'datefmt': '%Y-%m-%d %H:%M:%S',
 42         },
 43         'simple': {
 44             'format': simple_format
 45         },
 46     },
 47     'filters': {},
 48     'handlers': {
 49         'console': {
 50             'level': 'DEBUG',
 51             'class': 'logging.StreamHandler',  # 打印到屏幕
 52             'formatter': 'simple'
 53         },
 54         'default': {
 55             'level': 'DEBUG',
 56             'class': 'logging.handlers.RotatingFileHandler',  # 保存到文件
 57             'filename': logfile_path,  # 日志文件
 58             'maxBytes': 1024*1024*5,  # 日志大小 5M
 59             'backupCount': 5,
 60             'formatter': 'standard',
 61             'encoding': 'utf-8',  # 日志文件的编码，再也不用担心中文log乱码了
 62         },
 63     },
 64     'loggers': {
 65         '': {
 66             'handlers': ['default', 'console'],  # 这里把上面定义的两个handler都加上，即log数据既写入文件又打印到屏幕
 67             'level': 'DEBUG',
 68             'propagate': True,  # 向上（更高level的logger）传递
 69         },
 70     },
 71 }
 72 logging.config.dictConfig(LOGGING_DIC)  # 导入上面定义的配置
 73 logger = logging.getLogger(__name__)  # 生成一个log实例
 74 logger.info('It works!')  # 记录该文件的运行状态
 75 
 76 
 77 
 78 
 79 
 80 
 81 
 82 
 83 #! /usr/bin/env python
 84 # -*- coding: utf-8 -*-
 85 # __author__ = "Q1mi"
 86 # Email: master@liwenzhou.com
 87 
 88 """
 89 MyLogging Test
 90 """
 91 
 92 import time
 93 import logging
 94 from log_demo import my_logging  # 导入自定义的logging配置
 95 
 96 logger = logging.getLogger(__file__)  # 生成logger实例
 97 
 98 
 99 def demo():
100     logger.debug("start range... time:{}".format(time.time()))
101     logger.info("中文测试开始。。。")
102     for i in range(10):
103         logger.debug("i:{}".format(i))
104         time.sleep(2)
105     else:
106         logger.debug("over range... time:{}".format(time.time()))
107     logger.info("中文测试结束。。。")
108 
109 if __name__ == "__main__":
110     demo()

View Code

十三、常用模块之shutil模块

高级的文件、文件夹、压缩包处理模块。import shutil之后调用

1、shutil.copyfileobj(fsrc, fdst[, length])：将文件内容拷贝到另一个文件中

 '''
 1、shutil.copyfileobj(fsrc, fdst[, length])：将文件内容拷贝到另一个文件中
 '''
 import shutil
 shutil.copyfileobj(open('old.xml', 'r'), open('new.xml', 'w'))

View Code

2、shutil.copyfile(src, dst)：拷贝文件

1  '''
2 shutil.copyfile(src, dst)：拷贝文件
3 '''
4  import shutil
5  shutil.copyfile('f1.log', 'f2.log')

View Code

3、shutil.copymode(src, dst)：仅拷贝权限。内容、组、用户均不变

1 '''
2  3、shutil.copymode(src, dst)：仅拷贝权限。内容、组、用户均不变
3  '''
4  import shutil
5  shutil.copymode('f1.log', 'f2.log')

View Code

4、shutil.copystat(src, dst)：拷贝状态的信息，包括：mode bits, atime, mtime, flags

1 '''
2 4、shutil.copystat(src, dst)：拷贝状态的信息，包括：mode bits, atime, mtime, flags
3 '''
4 import shutil
5 shutil.copystat('f1.log', 'f2.log')

View Code

5、shutil.copy(src, dst)：拷贝文件和权限

1 '''
2 5、shutil.copy(src, dst)：拷贝文件和权限
3 '''
4 import shutil
5 shutil.copy('f1.log', 'f2.log')

View Code

6、shutil.copy2(src, dst)：拷贝文件和状态信息

1 '''
2 6、shutil.copy2(src, dst)：拷贝文件和状态信息
3 '''
4 import shutil
5 shutil.copy2('f1.log', 'f2.log')

View Code

7、shutil.ignore_patterns(*patterns)

8、shutil.copytree(src, dst, symlinks=False, ignore=None)：递归的去拷贝文件夹

1 '''
2 8、shutil.copytree(src, dst, symlinks=False, ignore=None)：递归的去拷贝文件夹
3 '''
4 import shutil
5 shutil.copytree('folder1', 'folder2', ignore=shutil.ignore_patterns('*.pyc', 'tmp*')) #目标目录不能存在，注意对folder2目录父级目录要有可写权限，ignore的意思是排除

View Code

1 import shutil
2 shutil.copytree('f1', 'f2', symlinks=True, ignore=shutil.ignore_patterns('*.pyc', 'tmp*'))#通常的拷贝都把软连接拷贝成硬链接，即对待软连接来说，创建新的文件

View Code

9、shutil.rmtree(path[, ignore_errors[, onerror]])：递归的去删除文件

'''
9、shutil.rmtree(path[, ignore_errors[, onerror]])：递归的去删除文件
'''
import shutil
shutil.rmtree('folder1')

# import os,sys
# shutil.rmtree(os.path.dirname(__file__)+"/c") # 删除 c目录  类似 rm -fr  不存在目录则报错

View Code

10、shutil.move(src, dst)：递归的去移动文件，它类似mv命令，其实就是重命名。

1 '''
2 10、shutil.move(src, dst)：递归的去移动文件，它类似mv命令，其实就是重命名。
3 '''
4 import shutil
5 
6 shutil.move('folder1', 'folder3')
7 # shutil.move("c","b1") # 剪切c目录到b目录下 ，src即c目录不存在则报错 ，dst即b目录不存在就是重命名

View Code

11、shutil.make_archive(base_name, format,...)

a.创建压缩包并返回文件路径，例如：zip、tar

b.创建压缩包并返回文件路径，例如：zip、tar

 1 import zipfile
 2 
 3 # 压缩
 4 # z = zipfile.ZipFile('laxi.zip', 'w')
 5 # z.write('log.log')
 6 # z.write('first.xml')
 7 # z.close()
 8 
 9 # 添加一个文件
10 # z = zipfile.ZipFile('laxi.zip', 'a')
11 # z.write('first1.xml')
12 # z.write('a/a') # 将a目和其下面的a文件一同录压缩到里面 如果存在会保存，但是仍然压缩进入
13 # z.write('b/c') # 将b目录和其下面的c文件一同压缩到里面
14 # z.write('b/b') # 将b目录和其下面的c文件一同压缩到里面
15 # z.close()
16 
17 # 解压
18 # z = zipfile.ZipFile('laxi.zip', 'r')
19 # z.extractall("log.log") # 解药所有文件到log.log目录
20 # z.extract("log.log") # 解压单个文件log.log到当前目录 文件如果存在也无报错
21 # z.extract("first.xml") # 解压单个文件log.log到当前目录 文件如果存在也无报错
22 # z.close()

View Code

 1 # 将 /Users/wupeiqi/Downloads/test 下的文件打包放置当前程序目录
 2 import shutil
 3 
 4 ret = shutil.make_archive("wwwwwwwwww", 'gztar', root_dir='/Users/wupeiqi/Downloads/test')
 5 
 6 # 将 /Users/wupeiqi/Downloads/test 下的文件打包放置 /Users/wupeiqi/目录
 7 import shutil
 8 
 9 ret = shutil.make_archive("/Users/wupeiqi/wwwwwwwwww", 'gztar', root_dir='/Users/wupeiqi/Downloads/test')
10 # import os,sys
11 # shutil.make_archive("my_bak","gztar",root_dir=os.path.dirname(__file__)+"/b1")
12 # shutil.make_archive(os.path.dirname(__file__)+"/a/my_bak","gztar",root_dir=os.path.dirname(__file__)+"/b1")

View Code

base_name：压缩包的文件名，也可以是压缩包的路径。只是文件名时，则保存至当前目录，否则保存至指定路径，
如：www =>保存至当前路径
如：/Users/wupeiqi/www =>保存至/Users/wupeiqi/

format：压缩包种类，“zip”, “tar”, “bztar”，“gztar”
root_dir：要压缩的文件夹路径（默认当前目录）
owner：用户，默认当前用户
group：组，默认当前组
logger：用于记录日志，通常是logging.Logger对象

c.shutil 对压缩包的处理是调用 ZipFile 和 TarFile 两个模块来进行的，详细：

zipfile模块处理

 1 import zipfile
 2 
 3 # 压缩
 4 # z = zipfile.ZipFile('laxi.zip', 'w')
 5 # z.write('log.log')
 6 # z.write('first.xml')
 7 # z.close()
 8 
 9 # 添加一个文件
10 # z = zipfile.ZipFile('laxi.zip', 'a')
11 # z.write('first1.xml')
12 # z.write('a/a') # 将a目和其下面的a文件一同录压缩到里面 如果存在会保存，但是仍然压缩进入
13 # z.write('b/c') # 将b目录和其下面的c文件一同压缩到里面
14 # z.write('b/b') # 将b目录和其下面的c文件一同压缩到里面
15 # z.close()
16 
17 # 解压
18 # z = zipfile.ZipFile('laxi.zip', 'r')
19 # z.extractall("log.log") # 解药所有文件到log.log目录
20 # z.extract("log.log") # 解压单个文件log.log到当前目录 文件如果存在也无报错
21 # z.extract("first.xml") # 解压单个文件log.log到当前目录 文件如果存在也无报错
22 # z.close()

View Code

tarfile模块处理

 1 import tarfile,os
 2 #　压缩
 3 # tar = tarfile.open("your.tar",'w') # 已存在不报错
 4 # tar.add(os.path.dirname(__file__),arcname="nonosd") #将前面的目录重新改名为nonosd目录名 归档到your.tar中
 5 # tar.add("first.xml",arcname="first.xml") #将前面的目录重新改名为nonosd目录名 归档到your.tar中
 6 # tar.close()
 7 
 8 # tar = zipfile.ZipFile('laxi.zip', 'a')
 9 # tar.write('first1.xml')
10 # tar.write('a/a') # 将a目和其下面的a文件一同录压缩到里面 如果存在会保存，但是仍然压缩进入
11 # tar.write('b/c') # 将b目录和其下面的c文件一同压缩到里面
12 # tar.write('b/b') # 将b目录和其下面的c文件一同压缩到里面
13 # tar.close()
14 
15 # 压缩
16 # tar = tarfile.open('your.tar','r')
17 # # print(tar.getmembers())
18 # print(tar.getnames()) #查看所有的文件名
19 # tar.extract('first.xml') #解压单个文件
20 # tar.extractall(path="a/") # 解压所有到 path
21 # tar.close()

View Code

十五、面向对象之类编程（一）

1、简介

面向过程的程序设计的核心是过程（流水线式思维），过程即解决问题的步骤，面向过程的设计就好比精心设计好一条流水线，考虑周全什么时候处理什么东西。

优点是：极大的降低了程序的复杂度

缺点是：一套流水线或者流程就是用来解决一个问题，生产汽水的流水线无法生产汽车，即便是能，也得是大改，改一个组件，牵一发而动全身。

应用场景：一旦完成基本很少改变的场景，著名的例子有Linux內核，git，以及Apache HTTP Server等。

面向对象的程序设计的核心是对象（上帝式思维），要理解对象为何物，必须把自己当成上帝，上帝眼里世间存在的万物皆为对象，不存在的也可以创造出来。面向对象的程序设计好比如来设计西游记，如来要解决的问题是把经书传给东土大唐，如来想了想解决这个问题需要四个人：唐僧，沙和尚，猪八戒，孙悟空，每个人都有各自的特征和技能（这就是对象的概念，特征和技能分别对应对象的数据属性和方法属性），然而这并不好玩，于是如来又安排了一群妖魔鬼怪，为了防止师徒四人在取经路上被搞死，又安排了一群神仙保驾护航，这些都是对象。然后取经开始，师徒四人与妖魔鬼怪神仙交互着直到最后取得真经。如来根本不会管师徒四人按照什么流程去取。

面向对象的程序设计的

优点是：解决了程序的扩展性。对某一个对象单独修改，会立刻反映到整个体系中，如对游戏中一个人物参数的特征和技能修改都很容易。

缺点：可控性差，无法向面向过程的程序设计流水线式的可以很精准的预测问题的处理流程与结果，面向对象的程序一旦开始就由对象之间的交互解决问题，即便是上帝也无法预测最终结果。于是我们经常看到一个游戏人某一参数的修改极有可能导致阴霸的技能出现，一刀砍死3个人，这个游戏就失去平衡。

应用场景：需求经常变化的软件，一般需求的变化都集中在用户层，互联网应用，企业内部软件，游戏等都是面向对象的程序设计大显身手的好地方

面向对象的程序设计并不是全部。对于一个软件质量来说，面向对象的程序设计只是用来解决扩展性。

2、类和对象概念

提示：python的class术语与c++有一定区别，与 Modula-3更像。

python中一切皆为对象，且python3统一了类与类型的概念，类型就是类，所以，不管你信不信，你已经使用了很长时间的类了。

基于面向对象设计一个款游戏：英雄联盟，每个玩家选一个英雄，每个英雄都有自己的特征和和技能，特征即数据属性，技能即方法属性，特征与技能的结合体就一个对象。

　　从一组对象中提取相似的部分就是类，类所有对象都具有的特征和技能的结合体

　　在python中，用变量表示特征，用函数表示技能，因而类是变量与函数的结合体，对象是变量与方法（指向类的函数）的结合体

　　补充几个有意思的点：

　　garen_hero.Q()称为向garen_hero这个对象发送了一条消息，让他去执行Q这个函数，完成一个功能，类似的有：

　　garen_hero.W()

　　garen_hero.E()

　　garen_hero.R()

　　一个英雄可以攻击另外一个英雄，这就是对象之间的交互

　　garen_hero.attack(Riven)

3、初识类：类是数据与函数的结合，二者称为类的属性

a.声明一个类：

1 '''
2 class 类名:
3     '类的文档字符串'
4     类体
5 '''
6 
7 #我们创建一个类
8 class Data:
9     pass

View Code

b.类的分类：经典类和新式类

 1 大前提：
 2 1.只有在python2中才分新式类和经典类，python3中统一都是新式类
 3 2.新式类和经典类声明的最大不同在于,所有新式类必须继承至少一个父类
 4 3.所有类甭管是否显式声明父类，都有一个默认继承object父类（讲继承时会讲，先记住）
 5 在python2中的区分
 6 经典类：
 7 class 类名:
 8     pass
 9 
10 新式类：
11 class 类名(父类):
12     pass
13 
14 在python3中，上述两种定义方式全都是新式类

View Code

c.一个类的示例：

1 class Garen:        #定义英雄盖伦的类，不同的玩家可以用它实例出自己英雄;
2     camp='Demacia'  #所有玩家的英雄(盖伦)的阵营都是Demacia;
3     def attack(self,enemy):   #普通攻击技能，enemy是敌人;
4         enemy.life_value-=self.aggressivity #根据自己的攻击力，攻击敌人就减掉敌人的生命值。

View Code

4、类的两种作用：属性引用和实例化

a.属性引用

 1 # class Chinese:
 2 #     country='China'
 3 #
 4 #     # Chinese.__init__(p1,'shuyang','18','male')
 5 #     def __init__(self,name,age,sex):
 6 #         #p1.Name=name；p1.Age=age,p1.Sex=sex
 7 #         self.Name=name
 8 #         self.Age=age
 9 #         self.Sex=sex
10 #
11 #
12 #     def talk(self):
13 #         print('talking',self)
14 
15 
16 #属性的引用
17 # print(Chinese.country)
18 # print(Chinese.talk)
19 # Chinese.talk(123)
20 # Chinese.x=1
21 # print(Chinese.x)
22 # Chinese.country=123123123123123
23 # print(Chinese.country)

View Code

b.实例化

 1 class Garen:        #定义英雄盖伦的类，不同的玩家可以用它实例出自己英雄;
 2     camp='Demacia'  #所有玩家的英雄(盖伦)的阵营都是Demacia;
 3     def __init__(self,nickname,aggressivity=58,life_value=455): #英雄的初始攻击力58...;
 4         self.nickname=nickname  #为自己的盖伦起个别名;
 5         self.aggressivity=aggressivity #英雄都有自己的攻击力;
 6         self.life_value=life_value #英雄都有自己的生命值;
 7     def attack(self,enemy):   #普通攻击技能，enemy是敌人;
 8         enemy.life_value-=self.aggressivity #根据自己的攻击力，攻击敌人就减掉敌人的生命值。
 9 
10 g1=Garen('草丛伦') #就是在执行Garen.__init__(g1,'草丛伦')，然后执行__init__内的代码g1.nickname=‘草丛伦’等

View Code

ps.self其实就是对象名，实例化成什么对象，self就代表什么对象

self的作用是在实例化时自动将对象/实例本身传给__init__的第一个参数，self可以是任意名字，但是瞎几把写别人就看不懂了。

这种自动传递的机制还体现在g1.attack的调用上

5、类的属性

a.类的属性查看的两种方式：

dir(类名)：查出的是一个名字列表

类名.__dict__:查出的是一个字典，key为属性名，value为属性值

b.特殊的类属性

1 类名.__name__# 类的名字(字符串)
2 类名.__doc__# 类的文档字符串
3 类名.__base__# 类的第一个父类(在讲继承时会讲)
4 类名.__bases__# 类所有父类构成的元组(在讲继承时会讲)
5 类名.__dict__# 类的字典属性
6 类名.__module__# 类定义所在的模块
7 类名.__class__# 实例对应的类(仅新式类中)

View Code

6、对象相关：

对象是关于类而实际存在的一个例子，即实例

1 >>> g1=Garen('草丛伦') #类实例化得到g1这个实例，基于该实例我们讲解实例相关知识
2 >>> type(g1) #查看g1的类型就是类Garen
3 <class '__main__.Garen'>
4 >>> isinstance(g1,Garen) #g1就是Garen的实例
5 True

View Code

a.对象/实例只有一种作用：属性引用

 1 #对象/实例本身其实只有数据属性
 2 >>> g1.nickname
 3 '草丛伦'
 4 >>> g1.aggressivity
 5 58
 6 >>> g1.life_value
 7 455
 8 '''
 9 查看实例属性
10 同样是dir和内置__dict__两种方式
11 特殊实例属性
12 __class__
13 __dict__
14 ....
15 '''

View Code

b.绑定方法:对象/实例本身只有数据属性，但是python的class机制会将类的函数绑定到对象上，称为对象的方法，或者叫绑定方法，绑定方法唯一绑定一个对象，同一个类的方法绑定到不同的对象上，属于不同的方法，内存地址都不会一样.

1 >>> g1.attack #对象的绑定方法
2 <bound method Garen.attack of <__main__.Garen object at 0x101348dd8>>
3 
4 >>> Garen.attack #对象的绑定方法attack本质就是调用类的函数attack的功能，二者是一种绑定关系
5 <function Garen.attack at 0x101356620>

View Code

ps.对象的绑定方法的特别之处在于：obj.func()会把obj传给func的第一个参数。

　　c.对象之间的交互:

 1 class Riven:
 2     camp='Noxus'  #所有玩家的英雄(锐雯)的阵营都是Noxus;
 3     def __init__(self,nickname,aggressivity=54,life_value=414): #英雄的初始攻击力54;
 4         self.nickname=nickname  #为自己的锐雯起个别名;
 5         self.aggressivity=aggressivity #英雄都有自己的攻击力;
 6         self.life_value=life_value #英雄都有自己的生命值;
 7     def attack(self,enemy):   #普通攻击技能，enemy是敌人;
 8         enemy.life_value-=self.aggressivity #根据自己的攻击力，攻击敌人就减掉敌人的生命值。
 9 
10 #实例出一个Riven来
11 r1=Riven('锐雯雯')
12 
13 #交互：锐雯雯攻击草丛伦，反之一样
14 g1.life_value  # 结果：455
15 r1.attack(g1)
16 g1.life_value # 结果：401

View Code

d.类名称空间与对象/实例名称空间

创建一个类就会创建一个类的名称空间，用来存储类中定义的所有名字，这些名字称为类的属性

而类有两种属性：数据属性和函数属性

其中类的数据属性是共享给所有对象的

1 1 >>> id(r1.camp) #本质就是在引用类的camp属性，二者id一样
2 2 4315241024
3 3 >>> id(Riven.camp)
4 4 4315241024

View Code

而类的函数属性是绑定到所有对象的：

 1 >>> id(r1.attack) 
 2 4302501512
 3 >>> id(Riven.attack)
 4 4315244200
 5 
 6 '''
 7 r1.attack就是在执行Riven.attack的功能，python的class机制会将Riven的函数属性attack绑定给r1，r1相当于拿到了一个指针，指向Riven类的attack功能
 8 
 9 除此之外r1.attack()会将r1传给attack的第一个参数
10 '''

View Code

ps.

创建一个对象/实例就会创建一个对象/实例的名称空间，存放对象/实例的名字，称为对象/实例的属性

在obj.name会先从obj自己的名称空间里找name，找不到则去类中找，类也找不到就找父类...最后都找不到就抛出异常

7、应用实例：

定义锐雯类：

 1 class Riven:
 2     camp='Noxus'
 3     def __init__(self,nickname,
 4                  aggressivity=54,
 5                  life_value=414,
 6                  money=1001,
 7                  armor=3):
 8         self.nickname=nickname
 9         self.aggressivity=aggressivity
10         self.life_value=life_value
11         self.money=money
12         self.armor=armor
13     def attack(self,enemy):
14         damage_value=self.aggressivity-enemy.armor
15         enemy.life_value-=damage_value

View Code

定义盖文类：

 1 class Garen:
 2     camp='Demacia'
 3     def __init__(self,nickname,
 4                  aggressivity=58,
 5                  life_value=455,
 6                  money=100,
 7                  armor=10):
 8         self.nickname=nickname
 9         self.aggressivity=aggressivity
10         self.life_value=life_value
11         self.money=money
12         self.armor=armor
13     def attack(self,enemy):
14         damage_value=self.aggressivity-enemy.armor
15         enemy.life_value-=damage_value

View Code

定义装备：

 1 class BlackCleaver:
 2     def __init__(self,price=475,aggrev=9,life_value=100):
 3         self.price=price
 4         self.aggrev=aggrev
 5         self.life_value=life_value
 6     def update(self,obj):
 7         obj.money-=self.price #减钱
 8         obj.aggressivity+=self.aggrev #加攻击
 9         obj.life_value+=self.life_value #加生命值
10     def fire(self,obj): #这是该装备的主动技能,喷火,烧死对方
11         obj.life_value-=1000 #假设火烧的攻击力是1000

View Code

测试交互：

 1 r1=Riven('草丛伦')
 2 g1=Garen('盖文')
 3 b1=BlackCleaver()
 4 
 5 print(r1.aggressivity,r1.life_value,r1.money) #r1的攻击力,生命值,护甲
 6 
 7 if r1.money > b1.price:
 8     r1.b1=b1
 9     b1.update(r1)
10 
11 
12 print(r1.aggressivity,r1.life_value,r1.money) #r1的攻击力,生命值,护甲
13 
14 print(g1.life_value)
15 r1.attack(g1) #普通攻击
16 print(g1.life_value)
17 r1.b1.fire(g1) #用装备攻击
18 print(g1.life_value) #g1的生命值小于0就死了

View Code