多线程
什么是线程？
- 能独立运行的基本单位——线程（Threads）。
- 线程是操作系统能够进行运算调度的最小单位。它被包含在进程之中，是进程中的实际运作单位。
- 一条线程指的是进程中一个单一顺序的控制流，一个进程中可以并发多个线程，每条线程并行执行不同的任务。
- 就好比生产的工厂，一个车间的工作过程是一个进程，车间中的一条条流水线工作的过程是不同的线程。
下面的图片就是线程与进程之间的关系
注意：进程是资源分配的最小单位,线程是CPU调度的最小单位.
每一个进程中至少有一个线程。
线程与进程的区别可以归纳为以下4点：
1）地址空间和其它资源（如打开文件）：进程间的地址空间相互独立，同一进程的各线程间共享进程的地址空间。某进程内的线程在其它进程不可见
2）通信：进程间通信IPC，线程间可以直接读写进程数据段（如全局变量）来进行通信——需要进程同步和互斥手段的辅助，以保证数据的一致性
3）调度和切换：线程上下文切换比进程上下文切换要快得多
4）在多线程操作系统中，进程不是一个可执行的实体
创建多线程简例
import time
import threading
def foo(n):
print('线程%s'%n)
time.sleep(3)
print('线程%s结束' % n)
def bar(n):
print('线程%s' % n)
time.sleep(2)
print('线程%s结束' % n)
begin = time.time()
print('------------主线程------------')
# 创建线程对象
t1 = threading.Thread(target = foo,args = (1,))
t2 = threading.Thread(target = bar,args = (2,))
# 通过 os 调度来抢占 cpu资源
t1.start()
t2.start()
# 线程不结束就不会继续向下进行
t1.join()
t2.join()
end = time.time()
print(end-begin)
join()方法
- join()方法会使线程在join处进行阻塞，倘若线程没完成就不会继续向下运行
import time
import threading
from time import ctime,sleep
def music(func):
for i in range(2):
print ("Begin listening to %s. %s" %(func,ctime()))
sleep(4)
print("----------end listening %s----------"%ctime())
def moive(func):
for i in range(2):
print ("Begin watching at the %s! %s" %(func,ctime()))
sleep(5)
print('----------end watching %s----------'%ctime())
threads = []
t1 = threading.Thread(target=music,args=('晴天',))
threads.append(t1)
t2 = threading.Thread(target=moive,args=('肖申克的救赎',))
threads.append(t2)
if __name__ == '__main__':
start = time.time()
for t in threads:
t.start()
#t.join() # t 先取的值为 t1 ，t1不结束就不会继续向下走，此时相当于串行
#t1.join() # 与 t.join() 效果一致
t.join() # 在python中不会报错，此时取值为 t2
#t2.join() # 在 t2 运行完成后，才会完成后续代码
print ("all over %s" %ctime())
end = time.time()
print(end - start)
守护线程 Daemon
- 守护线程setDaemon(True)，必须在start() 方法调用之前设置，否则将会报错
- 如果不设置为守护线程程序会被无限挂起。这个方法基本和join是相反的。
- 主线程一旦结束，子线程也同时结束
- 当主线程完成时不需要某个子线程完全运行完就要退出程序，那么就可以将这个子线程设置为守护线程，
import threading
import time
class MyThread(threading.Thread):
def __init__(self, num):
threading.Thread.__init__(self)
self.num = num
def run(self): # 定义每个线程要运行的函数
print("running on number:%s" % self.num)
time.sleep(10)
if __name__ == '__main__':
begin = time.time()
t1 = MyThread(1)
t2 = MyThread(2)
threads = [t1, t2]
for t in threads:
t.setDaemon(True)
t.start()
print('进程结束！')
end = time.time()
print(end-begin)
队列 queue
- queue类的方法
创建一个“队列”对象 import Queue q = Queue.Queue(maxsize = 10) Queue.Queue类即是一个队列的同步实现。队列长度可为无限或者有限。可通过Queue的构造函数的可选参数maxsize来设定队列长度。如果maxsize小于1就表示队列长度无限。 将一个值放入队列中 q.put(10) 调用队列对象的put()方法在队尾插入一个项目。put()有两个参数，第一个item为必需的，为插入项目的值；第二个block为可选参数，默认为 1。如果队列当前为空且block为1，put()方法就使调用线程暂停,直到空出一个数据单元。如果block为0，put方法将引发Full异常。 将一个值从队列中取出 q.get() 调用队列对象的get()方法从队头删除并返回一个项目。可选参数为block，默认为True。如果队列为空且block为True，get()就使调用线程暂停，直至有项目可用。如果队列为空且block为False，队列将引发Empty异常。 Python Queue模块有三种队列及构造函数: 1、Python Queue模块的FIFO队列先进先出。 class queue.Queue(maxsize) 2、LIFO类似于堆，即先进后出。 class queue.LifoQueue(maxsize) 3、还有一种是优先级队列级别越低越先出来。 class queue.PriorityQueue(maxsize) 此包中的常用方法(q = Queue.Queue()): q.qsize() 返回队列的大小 q.empty() 如果队列为空，返回True,反之False q.full() 如果队列满了，返回True,反之False q.full 与 maxsize 大小对应 q.get([block[, timeout]]) 获取队列，timeout等待时间 q.get_nowait() 相当q.get(False) 非阻塞 q.put(item) 写入队列，timeout等待时间 q.put_nowait(item) 相当q.put(item, False) q.task_done() 在完成一项工作之后，q.task_done() 函数向任务已经完成的队列发送一个信号 q.join() 实际上意味着等到队列为空，再执行别的操作
队列的简例
import threading,queue
from time import sleep
from random import randint
class Production(threading.Thread):
def run(self):
while True:
r = randint(0,100)
q.put(r)
print("生产出来%s号包子"%r)
sleep(1)
class Proces(threading.Thread):
def run(self):
while True:
re = q.get()
print("吃掉%s号包子"%re)
if __name__=="__main__":
q = queue.Queue(10)
threads = [Production(),Production(),Production(),Proces()]
for t in threads:
t.start()