Python基础之模块

模块(module)的概念

在计算机程序的开发过程中,随着程序代码越写越多,在一个文件里代码就会越来越长,越来越不容易维护。

为了编写可维护的代码,我们把很多函数分组,分别放到不同的文件里,这样,每个文件包含的代码就相对较少,很多编程语言都采用这种组织代码的方式。在Python中,一个.py文件就称之为一个模块(Module)。

使用模块有什么好处?

最大的好处是大大提高了代码的可维护性。

其次,编写代码不必从零开始。当一个模块编写完毕,就可以被其他地方引用。我们在编写程序的时候,也经常引用其他模块,包括Python内置的模块和来自第三方的模块。

所以,模块一共三种:

  • python标准库
  • 第三方模块
  • 应用程序自定义模块

另外,使用模块还可以避免函数名和变量名冲突。相同名字的函数和变量完全可以分别存在不同的模块中,因此,我们自己在编写模块时,不必考虑名字会与其他模块冲突。但是也要注意,尽量不要与内置函数名字冲突

模块导入方法

# 方法1
import modulr  # 在当前目录直接调用模块

# 方法2
from module_test import cal  # 二层目录调用模块

# 方法3
from web1.web2.web3 import cal1   #多层目录调用模块

# 方法4
# 使用该方法调用后可直接使用该模块中的函数,但有可能与调用模块中 已定义好的函数名重用,故不推荐使用
from module_test.cal import *  # 调用该模块中的函数,*代表调用所有
res = cal(3,4)       
print(res)

模块路径

#获取路径
import sys
for i in sys.path:
    print(i)

#输出结果:
S:Myproject
S:Python 3.5.1python35.zip
S:Python 3.5.1DLLs
S:Python 3.5.1lib                  #存放标准库
S:Python 3.5.1
S:Python 3.5.1libsite-packages    #存放第三方库,扩充库
 
#添加路径
import os
pre_path = os.path.abspath('../')  #当前路径
import sys
sys.path.append(pre_path)   #添加环境变量,临时生效
 环境变量:永久生效方法:我的电脑--->系统属性--->环境变量--->Path路径中添加,以";" 分割。

包(package)的概念

我们先设想一下,如果不同的人编写的模块名相同怎么办?为了避免冲突,Python又引进了按目录

来组织模块的方法,称为包(package)。

假设,如下图,我的两个time_file.py模块名字重名了,但是这两个模块的功能都不相同,如果这两个模块都在同一级目录中,那么我在其他地方要调用这个time_file.py模块,那么这个时候就会发生冲突,在这里我们就可以通过包来组织模块,避免冲突,

方法是:选择一个顶层包名,引入包以后,只要顶层的包名不与别人冲突,那这个包里面的模块都不会与别人冲突了。

请注意:每个包目录下来都会有一个__init__.py的文件,这个文件必须是存在的,否则,Python就不把这个目录当成普通目录,而不是一个包,__init__.py可以是空文件,也可以有python代码,__init__.py本身就是一个文件,它的模块命就是对应的包名,它一般由于做接口文件。

time模块

时间的相关操作,三种表示方式:

时间戳         1970年1月1日00:00开始的秒数             time.time()

格式化的字符串     2016-12-15 10:40:30                         time.strftime("%Y-%m-%d %X")   时间现实格式可自定

结构化时间           元祖的形式                                  time.localtime()  time.struct_time元祖中有9个元素:(年,月,日,时,分,秒,一年中第几周,一年中第几天,夏令时)

import time
 
# 1 time() :返回当前时间的时间戳
time.time()  #1473525444.037215
 
#----------------------------------------------------------
 
# 2 localtime([secs])
# 将一个时间戳转换为当前时区的struct_time。secs参数未提供,则以当前时间为准。
time.localtime() #time.struct_time(tm_year=2016, tm_mon=9, tm_mday=11, tm_hour=0,
# tm_min=38, tm_sec=39, tm_wday=6, tm_yday=255, tm_isdst=0)
time.localtime(1473525444.037215)
 
#----------------------------------------------------------
 
# 3 gmtime([secs]) 和localtime()方法类似,gmtime()方法是将一个时间戳转换为UTC时区(0时区)的struct_time。
 
#----------------------------------------------------------
 
# 4 mktime(t) : 将一个struct_time转化为时间戳。
print(time.mktime(time.localtime()))#1473525749.0
 
#----------------------------------------------------------
 
# 5 asctime([t]) : 把一个表示时间的元组或者struct_time表示为这种形式:'Sun Jun 20 23:21:05 1993'。
# 如果没有参数,将会将time.localtime()作为参数传入。
print(time.asctime())#Sun Sep 11 00:43:43 2016
 
#----------------------------------------------------------
 
# 6 ctime([secs]) : 把一个时间戳(按秒计算的浮点数)转化为time.asctime()的形式。如果参数未给或者为
# None的时候,将会默认time.time()为参数。它的作用相当于time.asctime(time.localtime(secs))。
print(time.ctime())  # Sun Sep 11 00:46:38 2016
 
print(time.ctime(time.time()))  # Sun Sep 11 00:46:38 2016
 
# 7 strftime(format[, t]) : 把一个代表时间的元组或者struct_time(如由time.localtime()和
# time.gmtime()返回)转化为格式化的时间字符串。如果t未指定,将传入time.localtime()。如果元组中任何一个
# 元素越界,ValueError的错误将会被抛出。
print(time.strftime("%Y-%m-%d %X", time.localtime()))#2016-09-11 00:49:56
 
# 8 time.strptime(string[, format])
# 把一个格式化时间字符串转化为struct_time。实际上它和strftime()是逆操作。
print(time.strptime('2011-05-05 16:37:06', '%Y-%m-%d %X'))
 
#time.struct_time(tm_year=2011, tm_mon=5, tm_mday=5, tm_hour=16, tm_min=37, tm_sec=6,
#  tm_wday=3, tm_yday=125, tm_isdst=-1)
 
#在这个函数中,format默认为:"%a %b %d %H:%M:%S %Y"。
 
 
# 9 sleep(secs)
# 线程推迟指定的时间运行,单位为秒。
 
# 10 clock()
# 这个需要注意,在不同的系统上含义不同。在UNIX系统上,它返回的是“进程时间”,它是用秒表示的浮点数(时间戳)。
# 而在WINDOWS中,第一次调用,返回的是进程运行的实际时间。而第二次之后的调用是自第一次调用以后到现在的运行
# 时间,即两次时间差。

不同时间格式之间的转换方式

print(time.strftime("%Y-%m-%d %X",time.localtime()))  #结构化转格式化
print(time.asctime(time.localtime()))  #结构化转格式化,不可自定义格式
print(time.strptime("2016-12-25 18:33:24","%Y-%m-%d %X"))  #格式化转结构化
print(time.mktime(time.localtime()))    #结构化转时间戳
print(time.gmtime(1421770825.256))     #时间戳转结构化
print(time.ctime(1421770825.256))   #时间戳转格式化,不可自定义格式

random模块

import random
 
print(random.random())          #用于生成一个0到1的随机符点数: 0 <= n < 1.0
print(random.randint(1,2))      #用于生成一个指定范围内的整数
print(random.randrange(1,10))   #从指定范围内,按指定基数递增的集合中获取一个随机数
print(random.uniform(1,10))     #用于生成一个指定范围内的随机符点数
print(random.choice('nick'))    #从序列中获取一个随机元素
li = ['nick','jenny','car',]
random.shuffle(li)              #用于将一个列表中的元素打乱
print(li)
li_new = random.sample(li,2)    #从指定序列中随机获取指定长度的片断(从li中随机获取2个元素,作为一个片断返回)
print(li_new)
import random

def v_code():

    code = ''
    for i in range(5):  #生成随机6位长度验证码,通过这里控制

        num=random.randint(0,9)
        alf=chr(random.randint(65,90))
        add=random.choice([num,alf])
        code += str(add)
    return code

print(v_code())

# LT7Q6 (随机生成的5位验证码,每次运行都不一样)
验证码

 os模块

os模块是与操作系统交互的一个接口

os.getcwd() 获取当前工作目录,即当前python脚本工作的目录路径
os.chdir("dirname")  改变当前脚本工作目录;相当于shell下cd
os.curdir  返回当前目录: ('.')
os.pardir  获取当前目录的父目录字符串名:('..')
os.makedirs('dirname1/dirname2')    可生成多层递归目录
os.removedirs('dirname1')    若目录为空,则删除,并递归到上一级目录,如若也为空,则删除,依此类推
os.mkdir('dirname')    生成单级目录;相当于shell中mkdir dirname
os.rmdir('dirname')    删除单级空目录,若目录不为空则无法删除,报错;相当于shell中rmdir dirname
os.listdir('dirname')    列出指定目录下的所有文件和子目录,包括隐藏文件,并以列表方式打印
os.remove()  删除一个文件
os.rename("oldname","newname")  重命名文件/目录
os.stat('path/filename')  获取文件/目录信息
os.sep    输出操作系统特定的路径分隔符,win下为"\",Linux下为"/"
os.linesep    输出当前平台使用的行终止符,win下为"	
",Linux下为"
"
os.pathsep    输出用于分割文件路径的字符串 win下为;,Linux下为:
os.name    输出字符串指示当前使用平台。win->'nt'; Linux->'posix'
os.system("bash command")  运行shell命令,直接显示
os.environ  获取系统环境变量
os.path.abspath(path)  返回path规范化的绝对路径
os.path.split(path)  将path分割成目录和文件名二元组返回
os.path.dirname(path)  返回path的目录。其实就是os.path.split(path)的第一个元素
os.path.basename(path)  返回path最后的文件名。如何path以/或结尾,那么就会返回空值。即os.path.split(path)的第二个元素
os.path.exists(path)  如果path存在,返回True;如果path不存在,返回False
os.path.isabs(path)  如果path是绝对路径,返回True
os.path.isfile(path)  如果path是一个存在的文件,返回True。否则返回False
os.path.isdir(path)  如果path是一个存在的目录,则返回True。否则返回False
os.path.join(path1[, path2[, ...]])  将多个路径组合后返回,第一个绝对路径之前的参数将被忽略
os.path.getatime(path)  返回path所指向的文件或者目录的最后存取时间
os.path.getmtime(path)  返回path所指向的文件或者目录的最后修改时间

sys模块

sys.argv           命令行参数List,第一个元素是程序本身路径
sys.exit(n)        退出程序,正常退出时exit(0)
sys.version        获取Python解释程序的版本信息
sys.maxint         最大的Int值
sys.path           返回模块的搜索路径,初始化时使用PYTHONPATH环境变量的值
sys.platform       返回操作系统平台名称
import sys,time
for i in range(50):
    sys.stdout.write("*")
    time.sleep(0.5)
    sys.stdout.flush() #强制刷新打印到屏幕
进度条

json & pickle 模块

用于序列化的两个模块

  • json,用于字符串 和 python数据类型间进行转换
  • pickle,用于python特有的类型 和 python的数据类型间进行转换

Json模块提供了四个功能:dumps、dump、loads、load

pickle模块提供了四个功能:dumps、dump、loads、load

  dump()函数接受一个文件句柄和一个数据对象作为参数,把数据对象以特定的格式保存 到给定的文件中。当我们使用load()函数从文件中取出已保存的对象时,pickle知道如何恢复这些对象到它们本来的格式。

  dumps()函数执行和dump() 函数相同的序列化。取代接受流对象并将序列化后的数据保存到磁盘文件,这个函数简单的返回序列化的数据。

  loads()函数执行和load() 函数一样的反序列化。取代接受一个流对象并去文件读取序列化后的数据,它接受包含序列化后的数据的str对象, 直接返回的对象。

示例:

ps1: 把一个字典,写入到文件中

1 dic = '{"name": "alex"}'
2 f = open("hello", "w")
3 f.write(dic)

执行结果:

会生成一个hello文件

1 {"name": "alex"}

ps2: 读取文件方法,把字典转成字符串

1 f_read=open("hello","r")  #读取文件
2 data=f_read.read()
3 print(type(data))
4 data=eval(data)      #字典转成字符串(eval的使用方法)
5 print(data["name"])

执行结果:

1 <class 'str'>
2 alex

json模块方法:

ps1: 把字典转换成json形式的字符串写入文件中 (两种方法效果一样,只是写法不同而已)

方法一:推荐用这种方法

#1、把字典转换成json形式的字符串写入文件中
import json
dic = {'name': 'alex'}
dic = json.dumps(dic)
f = open("hello", "w")
f.write(dic)

方法二:

1 import json
2 dic = {'name': 'alex'}
3 f = open("hello", "w")
4 dic = json.dump(dic, f)

执行结果:

会生成一个hello的文件,并写入内容:

1 {"name": "alex"}

#----------------json------------------反序列化

ps2:  把文件中json类型的字符串读取出来转换成字典

方法一:推荐用这种方法

#把文件中json类型的字符串读取出来转换成字典
import json
f = open('hello','r')
f = json.loads(f.read())
print(f)
print(type(f))

方法二:

1 import json
2 f = open('hello','r')
3 f = json.load(f)   #不常用这种方法
4 print(f)
5 print(type(f))

执行结果:

1 {'name': 'alex'} 
2 <class 'dict'>     #查看类型

注意点:

import json
#dct="{'1':111}"#json 不认单引号
#dct=str({"1":111})#报错,因为生成的数据还是单引号:{'one': 1}

dct='{"1":"111"}'
print(json.loads(dct))

#conclusion:
#        无论数据是怎样创建的,只要满足json格式,就可以json.loads出来,不一定非要dumps的数据才能loads

json的dumps,loads,dump,load功能总结:

json.dumps(x)    把python的(x)原对象转换成json字符串的对象,主要用来写入文件。

json.loads(f)       把json字符串(f)对象转换成python原对象,主要用来读取文件和json字符串

json.dump(x,f)  把python的(x)原对象,f是文件对象,写入到f文件里面,主要用来写入文件的

json.load(file)  把json字符串的文件对象,转换成python的原对象,只是读文件

                                                                   pickle

##----------------------------序列化
import pickle
 
dic={'name':'alvin','age':23,'sex':'male'}
 
print(type(dic))#<class 'dict'>
 
j=pickle.dumps(dic)
print(type(j))#<class 'bytes'>
 
 
f=open('序列化对象_pickle','wb')#注意是w是写入str,wb是写入bytes,j是'bytes'
f.write(j)  #-------------------等价于pickle.dump(dic,f)
 
f.close()
#-------------------------反序列化
import pickle
f=open('序列化对象_pickle','rb')
 
data=pickle.loads(f.read())#  等价于data=pickle.load(f)
 
 
print(data['age'])    

  Pickle的问题和所有其他编程语言特有的序列化问题一样,就是它只能用于Python,并且可能不同版本的Python彼此都不兼容,因此,只能用Pickle保存那些不重要的数据,不能成功地反序列化也没关系。

shelve 模块

 shelve模块比pickle模块简单,只有一个open函数,返回类似字典的对象,可读可写;key必须为字符串,而值可以是python所支持的数据类型

#添加键值对到文件中,会生成三个文件,并写入字典内容

import shelve

f = shelve.open(r'shelve1')  # 目的:将一个字典放入文本 f={}
f['stu1_info']={'name':'alex','age':'18'}
f['stu2_info']={'name':'alvin','age':'20'}
f['school_info']={'website':'oldboyedu.com','city':'beijing'}
f.close()

执行结果:

会生成三个文件:shelvel.dat,shelve1.dir,shelve1.bak,其中shelvel.bak中内容如下:

1 'stu1_info', (0, 49)           #生成只有计算机能识别的语言
2 'stu2_info', (512, 50)
3 'school_info', (1024, 67)

取出age的值

import shelve

f = shelve.open(r'shelve1')
print(f.get('stu1_info')['age'])  #取出age的值
print(f.get('stu2_info')['age'])

结果>>>
1 18
2 20

xml 模块

  xml是实现不同语言或程序之间进行数据交换的协议,跟json差不多,但json使用起来更简单,不过,古时候,在json还没诞生的黑暗年代,大家只能选择用xml呀,至今很多传统公司如金融行业的很多系统的接口还主要是xml。

xml的格式如下,就是通过<>节点来区别数据结构的:

<?xml version="1.0"?>
<data>
    <country name="Liechtenstein">
        <rank updated="yes">2</rank>
        <year>2008</year>
        <gdppc>141100</gdppc>
        <neighbor name="Austria" direction="E"/>
        <neighbor name="Switzerland" direction="W"/>
    </country>
    <country name="Singapore">
        <rank updated="yes">5</rank>
        <year>2011</year>
        <gdppc>59900</gdppc>
        <neighbor name="Malaysia" direction="N"/>
    </country>
    <country name="Panama">
        <rank updated="yes">69</rank>
        <year>2011</year>
        <gdppc>13600</gdppc>
        <neighbor name="Costa Rica" direction="W"/>
        <neighbor name="Colombia" direction="E"/>
    </country>
</data>

xml协议在各个语言里的都 是支持的,在python中可以用以下模块操作xml:


import xml.etree.ElementTree as ET
 
tree = ET.parse("xmltest.xml")
root = tree.getroot()
print(root.tag)
 
#遍历xml文档
for child in root:
    print(child.tag, child.attrib)
    for i in child:
        print(i.tag,i.text)
 
#只遍历year 节点
for node in root.iter('year'):
    print(node.tag,node.text)


    #执行结果:
             year 2008
             year 2011
         year 2011
#---------------------------------------


import xml.etree.ElementTree as ET
 
tree = ET.parse("xmltest.xml")
root = tree.getroot()
 
#修改
for node in root.iter('year'):
    new_year = int(node.text) + 1  #2008+1=2009
    node.text = str(new_year)
    node.set("updated","yes")      #修改通过set,加个属性yes
 
tree.write("xmltest.xml")
 
 #执行结果:
      会生成一个新的xmltest.xml文件,内容中会添加
      <year updated="yes">2009</year>  #年份+1,加个yes属性
#删除node
for country in root.findall('country'):   #通过对country进行遍历
   rank = int(country.find('rank').text)  #再用find找到rank
   if rank > 50:                          #再判断>50的值
     root.remove(country)                 #再用remove删除
 
tree.write('output.xml')                  #写到一个新文件中


自己创建xml文档:

import xml.etree.ElementTree as ET    #as后面的ET是前面的类的别名,名称随便取
 
 
new_xml = ET.Element("namelist")
name = ET.SubElement(new_xml,"name",attrib={"enrolled":"yes"})
age = ET.SubElement(name,"age",attrib={"checked":"no"})
sex = ET.SubElement(name,"sex")
sex.text = '33'
name2 = ET.SubElement(new_xml,"name",attrib={"enrolled":"no"})
age = ET.SubElement(name2,"age")
age.text = '19'
 
et = ET.ElementTree(new_xml) #生成文档对象  (记住重点)
et.write("test.xml", encoding="utf-8",xml_declaration=True)  (记住重点)
 
ET.dump(new_xml) #打印生成的格式

执行结果:

会生成一个test.xml的文件:

<?xml version='1.0' encoding='utf-8'?>

<namelist>
    <name enrolled="yes">
        <age checked="no" />
        <sex>33</sex>
    </name>
    <name enrolled="no">
        <age>19</age>
    </name>
</namelist>

 configparser 模块

configparser 模块作用: 用来读写配置文件。

一、常见文档格式如下:
1、先新建一个名字为confile文件,写入下面内容:

[DEFAULT]
ServerAliveInterval = 45
Compression = yes
CompressionLevel = 9
ForwardX11 = yes
  
[bitbucket.org]
User = hg
  
[topsecret.server.com]
Port = 50022
ForwardX11 = no

ps1:写入一个文件

import configparser

config = configparser.ConfigParser()     #config={}

config["DEFAULT"] = {'ServerAliveInterval': '45',
                     'Compression': 'yes',
                     'CompressionLevel': '9'}

with open('example1.ini', 'w') as f:
    config.write(f)

执行结果:

#会生成example1.ini文件,内容如下:
[DEFAULT]
compressionlevel = 9
compression = yes
serveraliveinterval = 45

ps2:生成多个键值对

import configparser

config = configparser.ConfigParser()     #config={}

config["DEFAULT"] = {'ServerAliveInterval': '45',
                     'Compression': 'yes',
                     'CompressionLevel': '9'}

config['bitbucket.org'] = {}
config['bitbucket.org']['User'] = 'hg'

config['topsecret.server.com'] = {}
topsecret = config['topsecret.server.com']
topsecret['Host Port'] = '50022'      # mutates the parser
topsecret['ForwardX11'] = 'no'        # same here

with open('example1.ini', 'w') as f:
    config.write(f)

执行结果:

#会生成example1.ini文件,内容如下:

[DEFAULT]
compression = yes
compressionlevel = 9
serveraliveinterval = 45

[bitbucket.org]
user = hg

[topsecret.server.com]
host port = 50022
forwardx11 = no
import configparser

config = configparser.ConfigParser()

#---------------------------------------------查
print(config.sections())   #[]

config.read('example.ini')

print(config.sections())   #['bitbucket.org', 'topsecret.server.com']

print('bytebong.com' in config)# False

print(config['bitbucket.org']['User']) # hg

print(config['DEFAULT']['Compression']) #yes

print(config['topsecret.server.com']['ForwardX11'])  #no


for key in config['bitbucket.org']:
    print(key)


# user
# serveraliveinterval
# compression
# compressionlevel
# forwardx11


print(config.options('bitbucket.org'))#['user', 'serveraliveinterval', 'compression', 'compressionlevel', 'forwardx11']
print(config.items('bitbucket.org'))  #[('serveraliveinterval', '45'), ('compression', 'yes'), ('compressionlevel', '9'), ('forwardx11', 'yes'), ('user', 'hg')]

print(config.get('bitbucket.org','compression'))#yes


#---------------------------------------------删,改,增(config.write(open('i.cfg', "w")))


config.add_section('yuan')

config.remove_section('topsecret.server.com')
config.remove_option('bitbucket.org','user')

config.set('bitbucket.org','k1','11111')

config.write(open('i.cfg', "w"))

增删改查
增删改查

hashlib 模块

hashlib 明文变成密文,不能反解
用于加密相关的操作,3.x里代替了md5模块和sha模块,主要提供 SHA1, SHA224, SHA256, SHA384, SHA512 ,MD5 算法

md5算法 明文变成密文

ps1:md5算法

1 import hashlib
2 
3 obj=hashlib.md5()
4 obj.update("admin".encode("utf8"))
5 print(obj.hexdigest())

执行结果:

21232f297a57a5a743894a0e4a801fc3 (长度32位)

ps2:

import hashlib

#md5加密+字符串,生成密码。就无法破解
obj=hashlib.md5("sssdsdsb".encode("utf8"))   #在md5里面加点字符串,再生成,就没法破解
obj.update("admin".encode("utf8"))

print(obj.hexdigest())

执行结果:

639cd764cf1bab2bebaa5804e37530e6

ps3:

以上加密算法虽然依然非常厉害,但时候存在缺陷,即:通过撞库可以反解。所以,有必要对加密算法中添加自定义key再来做加密。

####### 256 位########

1 import hashlib
2 
3 hash = hashlib.sha256('898oaFs09f'.encode('utf8'))
4 hash.update('alvin'.encode('utf8'))
5 print(hash.hexdigest()) 

执行结果:

e79e68f070cdedcfe63eaf1a2e92c83b4cfb1b5c6bc452d214c1b7e77cdfd1c7

ps4:

python 还有一个 hmac 模块,它内部对我们创建 key 和 内容 再进行处理然后再加密:

1 import hmac
2 
3 h = hmac.new('alvin'.encode('utf8'))
4 h.update('hello'.encode('utf8'))
5 print (h.hexdigest())

执行结果:

320df9832eab4c038b6c1d7ed73a5940

logging 模块

一. logging模块

ps1:

import logging  

logging.debug('debug message')  
logging.info('info message')  
logging.warning('warning message')  
logging.error('error message')  
logging.critical('critical message')

执行结果:  (默认是WARNING级别,所以只显示三条信息)

1 WARNING:root:warning message
2 ERROR:root:error message
3 CRITICAL:root:critical message 

日志级别:一般info就够用
默认情况下Python的logging模块将日志打印到了标准输出中,且只显示了大于等于WARNING级别的日志,这说明默认的日志级别设置为WARNING
日志级别等级CRITICAL > ERROR > WARNING > INFO > DEBUG > NOTSET(从高到低),默认的日志格式为日志级别:Logger名称:用户输出消息。

ps2:设置参数,调日志级别。调整为DEBUG级别,显示5条信息

import logging

logging.basicConfig(
level=logging.DEBUG
)

logging.debug('debug message')
logging.info('info message')
logging.warning('warning message')
logging.error('error message')
logging.critical('critical message')

执行结果:显示5条信息

1 DEBUG:root:debug message
2 INFO:root:info message
3 WARNING:root:warning message
4 ERROR:root:error message
5 CRITICAL:root:critical message

ps3:设置filename把日志写入到文件中,并参过加w参数,控制他每次只写5条,不重复的记录

import logging

logging.basicConfig(
level=logging.DEBUG,           #默认信息显示在屏幕上面
filename="logger.log",         #通过加filename参数,以追加的方式,把日志信息写入到文件中,每次重复运行都会往里面写5条记录
filemode="w",                  #通过加w参数,就可以控制他,每次只写5条记录。不会重复往里写相同记录
)

logging.debug('debug message')
logging.info('info message')
logging.warning('warning message')
logging.error('error message')
logging.critical('critical message')

执行结果:

会创建一个logger.log日志,并写入五条记录
DEBUG:root:debug message
INFO:root:info message
WARNING:root:warning message
ERROR:root:error message
CRITICAL:root:critical message

ps4:给logging加上参数,显示时间,行号等信息。

import logging

logging.basicConfig(
level=logging.DEBUG,     #默认信息显示在屏幕上面
filename="logger.log",   #通过加filename参数,以追加的方式,把日志信息写入到文件中,每次重复运行都会往里面写5条记录
filemode="w",            #通过加w参数,就可以控制他,每次只写5条记录。不会重复往里写相同记录
# format="%(asctime)s",  #加上时间
format="%(asctime)s %(filename)s[%(lineno)d]  %(message)s"  #asctime 时间,lineno 行号,message 信息,还可以加其它信息参数
)

logging.debug('debug message')
logging.info('info message')
logging.warning('warning message')
logging.error('error message')
logging.critical('critical message')

执行结果:

# 会创建一个logger.log日志,并写入五条记录
2016-12-15 14:10:33,615 logging_s1.py[15]  debug message
2016-12-15 14:10:33,616 logging_s1.py[16]  info message
2016-12-15 14:10:33,616 logging_s1.py[17]  warning message
2016-12-15 14:10:33,616 logging_s1.py[18]  error message
2016-12-15 14:10:33,617 logging_s1.py[19]  critical message

可见在logging.basicConfig()函数中可通过具体参数来更改logging模块默认行为,可用参数有
filename:用指定的文件名创建FiledHandler(后边会具体讲解handler的概念),这样日志会被存储在指定的文件中。
filemode:文件打开方式,在指定了filename时使用这个参数,默认值为“a”还可指定为“w”。
format:指定handler使用的日志显示格式。
datefmt:指定日期时间格式。
level:设置rootlogger(后边会讲解具体概念)的日志级别
stream:用指定的stream创建StreamHandler。可以指定输出到sys.stderr,sys.stdout或者文件(f=open('test.log','w')),默认为sys.stderr。若同时列出了filename和stream两个参数,则stream参数会被忽略。

format参数中可能用到的格式化串:
%(name)s Logger的名字
%(levelno)s 数字形式的日志级别
%(levelname)s 文本形式的日志级别
%(pathname)s 调用日志输出函数的模块的完整路径名,可能没有
%(filename)s 调用日志输出函数的模块的文件名
%(module)s 调用日志输出函数的模块名
%(funcName)s 调用日志输出函数的函数名
%(lineno)d 调用日志输出函数的语句所在的代码行
%(created)f 当前时间,用UNIX标准的表示时间的浮 点数表示
%(relativeCreated)d 输出日志信息时的,自Logger创建以 来的毫秒数
%(asctime)s 字符串形式的当前时间。默认格式是 “2003-07-08 16:49:45,896”。逗号后面的是毫秒
%(thread)d 线程ID。可能没有
%(threadName)s 线程名。可能没有
%(process)d 进程ID。可能没有
%(message)s用户输出的消息

二、logger对象(自定义日志格式,经常用的一种方法) 重点掌握

上述几个例子中我们了解到了logging.debug()、logging.info()、logging.warning()、logging.error()、logging.critical()(分别用以记录不同级别的日志信息),logging.basicConfig()(用默认日志格式
(Formatter)为日志系统建立一个默认的流处理器(StreamHandler),设置基础配置(如日志级别等)并加到root logger(根Logger)中)这几个logging模块级别的函数,另外还有一个模块级别的函数
是logging.getLogger([name])(返回一个logger对象,如果没有指定名字将返回root logger)

原理图:

ps1:

import logging

logger=logging.getLogger()         #创建一个大对象

fh=logging.FileHandler("test_log") #向文件里发送内容,并且给个参数,作用是:定义一个文件名,往文件里写入内容
ch=logging.StreamHandler()         #向屏幕上发送内容

fm=logging.Formatter("%(asctime)s  %(message)s")   #这个也是一个对象,作用是:定义日志格式

fh.setFormatter(fm)     #往文件里写内容
ch.setFormatter(fm)     #往屏幕上输出内容

logger.addHandler(fh)   #对象,类似于吸别人内力,把fh吃掉
logger.addHandler(ch)   #对象,类似于吸别人内力,把ch吃掉

logger.debug("debug")   #输出日志的级别
logger.info("info")
logger.warning("warning")
logger.error("error")
logger.critical("critical")

执行结果:

会生成一个test_log的文件,同时往里面写入信息,并在屏幕上面显示相同信息。
文件内容如下:
2016-12-15 14:38:27,657  warning
2016-12-15 14:38:27,658  error
2016-12-15 14:38:27,658  critical

屏幕输出信息如下:
2016-12-15 14:38:27,657  warning
2016-12-15 14:38:27,658  error
2016-12-15 14:38:27,658  critical

ps2: logger.setLevel("DEBUG")   调整日志级别,控制日志显示信息,DEBUG显示5条记录

import logging

logger=logging.getLogger()         #创建一个大对象

fh=logging.FileHandler("test_log") #向文件里发送内容,并且给个参数,作用是:定义一个文件名,往文件里写入内容
ch=logging.StreamHandler()         #向屏幕上发送内容

fm=logging.Formatter("%(asctime)s  %(message)s")   #这个也是一个对象,作用是:定义日志格式

fh.setFormatter(fm)      #往文件里写内容
ch.setFormatter(fm)      #往屏幕上输出内容

logger.addHandler(fh)    #对象,类似于吸别人内力,把fh吃掉
logger.addHandler(ch)    #对象,类似于吸别人内力,把ch吃掉
logger.setLevel("DEBUG") #设置日志级别,控制日志输入多少条信息


#-------------从这里开始都是在操作log----------------

logger.debug("debug")   #输出日志的级别
logger.info("info")
logger.warning("warning")
logger.error("error")
logger.critical("critical")

执行结果:

# 会生成一个test_log的文件,同时往里面写入信息,并在屏幕上面显示相同信息。
文件内容如下:
2016-12-15 14:54:37,036  debug
2016-12-15 14:54:37,037  info
2016-12-15 14:54:37,038  warning
2016-12-15 14:54:37,038  error
2016-12-15 14:54:37,039  critical

#屏幕输出信息如下:
2016-12-15 14:54:37,036  debug
2016-12-15 14:54:37,037  info
2016-12-15 14:54:37,038  warning
2016-12-15 14:54:37,038  error
2016-12-15 14:54:37,039  critical

ps3:写成函数的形式,并有返回值

import logging

def logger():

    logger=logging.getLogger()         #创建一个大对象

    fh=logging.FileHandler("test_log") #向文件里发送内容,并且给个参数,作用是:定义一个文件名,往文件里写入内容
    ch=logging.StreamHandler()         #向屏幕上发送内容

    fm=logging.Formatter("%(asctime)s  %(message)s")   #这个也是一个对象,作用是:定义日志格式

    fh.setFormatter(fm)       #往文件里写内容
    ch.setFormatter(fm)       #往屏幕上输出内容

    logger.addHandler(fh)     #对象,类似于吸别人内力,把fh吃掉
    logger.addHandler(ch)     #对象,类似于吸别人内力,把ch吃掉
    logger.setLevel("DEBUG")  #设置日志级别,控制日志输入多少条信息

    return logger

#-------------从这里开始都是在操作log----------------
logger=logger()         #这个日志就做成了一个接口,想在其它地方使用,直接调用他就可以啦!

logger.debug("debug")   #输出日志的级别
logger.info("info")
logger.warning("warning")
logger.error("error")
logger.critical("critical")

执行结果:

会生成一个test_log的文件,同时往里面写入信息,并在屏幕上面显示相同信息。
文件内容如下:
2016-12-15 14:54:37,036  debug
2016-12-15 14:54:37,037  info
2016-12-15 14:54:37,038  warning
2016-12-15 14:54:37,038  error
2016-12-15 14:54:37,039  critical

屏幕输出信息如下:
2016-12-15 14:54:37,036  debug
2016-12-15 14:54:37,037  info
2016-12-15 14:54:37,038  warning
2016-12-15 14:54:37,038  error
2016-12-15 14:54:37,039  critical

ps4 : 只在屏幕文件中写入日志,不在屏幕上面显示

import logging

def logger():

    logger=logging.getLogger()         #创建一个大对象

    fh=logging.FileHandler("test_log") #向文件里发送内容,并且给个参数,作用是:定义一个文件名,往文件里写入内容
    #ch=logging.StreamHandler()        #向屏幕上发送内容

    fm=logging.Formatter("%(asctime)s  %(message)s")   #这个也是一个对象,作用是:定义日志格式

    fh.setFormatter(fm)      #往文件里写内容
    #ch.setFormatter(fm)     #往屏幕上输出内容

    logger.addHandler(fh)    #对象,类似于吸别人内力,把fh吃掉
    #logger.addHandler(ch)   #对象,类似于吸别人内力,把ch吃掉
    logger.setLevel("DEBUG") #设置日志级别,控制日志输入多少条信息

    return logger

#-------------从这里开始都是在操作log----------------
logger=logger()         #这个日志就做成了一个接口,在其它地方,直接调用他就可以啦!

logger.debug("debug")   #输出日志的级别
logger.info("info")
logger.warning("warning")
logger.error("error")
logger.critical("critical")

执行结果:

#会生成一个test_log的文件,同时往里面写入信息,不会在屏幕上面显示信息。
#文件内容如下:
2016-12-15 14:54:37,036  debug
2016-12-15 14:54:37,037  info
2016-12-15 14:54:37,038  warning
2016-12-15 14:54:37,038  error
2016-12-15 14:54:37,039  critical

ps5: 没有根用户

如果我们再创建两个logger对象

import logging

logger1 = logging.getLogger('mylogger')   #默认是根,这里代表他是子用户(两个用户是同级)
#logger1 = logging.getLogger('mylogger.sontree')   #如果mylogger下再创建一个字对象,就用.sontree;等于他就是mylogger的下级对象。
logger1.setLevel(logging.DEBUG)           #第一次是DEBUG级别

logger2 = logging.getLogger('mylogger')   #默认是根,这里代表他是子用户(两个用户是同级)
logger2.setLevel(logging.INFO)            #第二次是INFO级别,覆盖第一次的级别,所以打印结果是INFO级别显示

fh=logging.FileHandler("test_log-new")    #向文件里发送内容,并且给个参数,作用是:定义一个文件名,往文件里写入内容
ch=logging.StreamHandler()                #向屏幕上发送内容

logger1.addHandler(fh)
logger1.addHandler(ch)

logger2.addHandler(fh)
logger2.addHandler(ch)

执行结果:

logger1 and logger2各打印4条信息
生成一个test_log-new的文件,同时往里面写入信息,并在屏幕上面显示相同信息。
文件内容如下:
logger1 info message
logger1 warning message
logger1 error message
logger1 critical message
logger2 info message
logger2 warning message
logger2 error message
logger2 critical message

#屏幕上面显示的内容
logger1 info message
logger1 warning message
logger1 error message
logger1 critical message
logger2 info message
logger2 warning message
logger2 error message
logger2 critical message

ps6: 添加根用户  (lgger和mylogger是父子关系) (注意日志输出问题)

import logging

logger = logging.getLogger()              #根用户(根用户级别,没有定义日志级别,默认warning级别,所以是3条信息

logger1 = logging.getLogger('mylogger')   #默认是根,这里代表他是子用户(两个用户是同级)
logger1.setLevel(logging.DEBUG)           #第一次是DEBUG级别,默认是打印五条信息,但是他打印信息的时候,会先去找父,如果有父,他就会多打印一遍,所以输出是10条信息

fh=logging.FileHandler("test_log-new")    #向文件里发送内容,并且给个参数,作用是:定义一个文件名,往文件里写入内容
ch=logging.StreamHandler()                #向屏幕上发送内容

logger.addHandler(ch)                     #添加一个根用户
logger.addHandler(fh)

logger1.addHandler(fh)                    #添加一个子用户
logger1.addHandler(ch)

#打印信息
logger.debug('logger debug message')
logger.info('logger info message')
logger.warning('logger warning message')
logger.error('logger error message')
logger.critical('logger critical message')

#打印4条信息
logger1.debug('logger1 debug message')
logger1.info('logger1 info message')
logger1.warning('logger1 warning message')
logger1.error('logger1 error message')
logger1.critical('logger1 critical message')

输出结果:

生成一个test_log-new的文件,同时往里面写入信息,并在屏幕上面显示相同信息。
文件内容如下:
logger warning message
logger error message
logger critical message    #前三条是根输出的三条信息
logger1 debug message      #后10条是子输出的10条信息,为什么会输入10条呢?
logger1 debug message      #第一次是DEBUG级别,默认是打印五条信息,但是他打印信息的时候,会先去找父,如果有父,他就会多打印一遍,所以输出是5+5=10条信息
logger1 info message
logger1 info message
logger1 warning message
logger1 warning message
logger1 error message
logger1 error message
logger1 critical message
logger1 critical message

 #屏幕输出内容如下:
logger warning message
logger error message
logger critical message    
logger1 debug message
logger1 debug message
logger1 info message
logger1 info message
logger1 warning message
logger1 warning message
logger1 error message
logger1 error message
logger1 critical message
logger1 critical message

ps7:添加根用户  (控制根用户不输入,只输出子用户信息)

import logging

logger = logging.getLogger()                #根用户(根用户级别,没有定义日志级别,默认warning级别,所以是3条信息

logger1 = logging.getLogger('mylogger')     #默认是根,这里代表他是子用户(两个用户是同级)
logger1.setLevel(logging.DEBUG)             #第一次是DEBUG级别,默认是打印五条信息,但是他打印信息的时候,会先去找父,如果有父,他就会多打印一遍,所以输出是10条信息

fh=logging.FileHandler("test_log-new")      #向文件里发送内容,并且给个参数,作用是:定义一个文件名,往文件里写入内容
ch=logging.StreamHandler()                  #向屏幕上发送内容

logger1.addHandler(fh)                      #添加一个子用户
logger1.addHandler(ch)

#打印4条信息
logger1.debug('logger1 debug message')
logger1.info('logger1 info message')
logger1.warning('logger1 warning message')
logger1.error('logger1 error message')
logger1.critical('logger1 critical message')

执行结果:

#生成一个test_log-new的文件,同时往里面写入信息,并在屏幕上面显示相同信息。
文件内容如下:
logger1 debug message
logger1 info message
logger1 warning message
logger1 error message
logger1 critical message

#屏幕输出内容如下:
logger1 debug message
logger1 info message
logger1 warning message
logger1 error message
logger1 critical message
原文地址:https://www.cnblogs.com/xyt521/p/6182486.html