目录
第十五章、python中的进程操作-开启多进程
一、multprocess模块
multiprocess不是一个模块而是python中一个操作、管理进程的包。 在这个包中几乎包含了和进程有关的所有子模块,将这部分大致分为四个部分:创建进程部分,进程同步部分,进程池部分,进程之间数据共享。
二、multprocess.process模块
Process类中的参数有如下
group=None, target=None, name=None, args=(), kwargs={}----------------------------------------------------------eg:p = Process(target=foo)#实例化出p子进程对象
强调:
- 需要使用关键字的方式来指定参数
- args指定的为传给target函数的位置参数,是一个元组形式,必须有逗号
参数介绍:
- group参数未使用,值始终为None
- target表示调用对象,即子进程要执行的任务
- args表示调用对象的位置参数元组,
args=(1,2,'egon',)
- kwargs表示调用对象的字典,
kwargs={'name':'egon','age':18}
- name为子进程的名称
三、Process()对象方法介绍
p.start()
:启动进程,并调用该子进程中的p.run()p.run()
:进程启动时运行的方法,正是它去调用target指定的函数,我们自定义类的类中一定要实现该方法p.terminate()
:强制终止进程p,不会进行任何清理操作,如果p创建了子进程,该子进程就成了僵尸进程,使用该方法需要特别小心这种情况。如果p还保存了一个锁那么也将不会被释放,进而导致死锁p.is_alive()
:如果p仍然运行,返回Truefrom multiprocessing import Process,current_processimport timedef foo(): print('进程 start') time.sleep(2) print('进程 end')if __name__ == '__main__': p = Process(target=foo) p.start() print(p.is_alive()) # True#打印与子进程同时进行 time.sleep(5)#在五秒内的第三秒进程就已经结束了 print(p.is_alive()) # 代码运行完了就算死了 False print('主')
p.join([timeout])
:主线程等待p终止(强调:是主线程处于等的状态,而p是处于运行的状态)。timeout是可选的超时时间,需要强调的是,p.join只能join住start开启的进程,而不能join住run开启的进程from multiprocessing import Processimport timedef foo(): print('进程 start ') time.sleep(2.3) print('进程 end ')if __name__ == '__main__': p = Process(target=foo) p.start() # # 核心需求就是 # time.sleep(5) p.join() # 阻塞住主进程再等待子进程结束,然后再往下执行,(了解的是:内部会待用wait()) print('主')
四、Process()对象属性介绍
p.daemon
:默认值为False,如果设为True,代表p为后台运行的守护进程,当p的父进程终止时,p也随之终止,并且设定为True后,p不能创建自己的新进程,必须在p.start()
之前设置p.name
:进程的名称p.pid
:进程的pid
五、使用process模块创建进程
import timefrom multiprocessing import Processdef f(name): print('hello', name) print('我是子进程')if __name__ == '__main__': p = Process(target=f, args=('bob',)) p.start() time.sleep(1) print('执行主进程的内容了'
六、进程之间的数据隔离问题
from multiprocessing import Processimport timex = 0def task(): global x x = 100 print('子进程的x修改为了{}'.format(x))if __name__ == '__main__': p = Process(target=task) p.start() time.sleep(5) print(x)
七、守护进程
守护进程会随着主进程的结束而结束。
由主进程创建守护进程
其一:守护进程会在主进程代码执行结束后就终止
其二:守护进程内无法再开启子进程,否则抛出异常:AssertionError: daemonic processes are not allowed to have children
from multiprocessing import Processimport timedef foo(): print('守护进程 start') time.sleep(5) print('守护进程 end') p = Process(target=foo)#第三秒的时候主进程结束了没执行到这一步,不报错 p.start()if __name__ == '__main__': p = Process(target=foo) p.daemon =True # 把这个子进程定义为了守护进程, p.start() time.sleep(2)#子进程还没有结束,主进程结束了强制子进程提前结束 print('主')
from multiprocessing import Processimport timedef foo(): print('守护进程 start') time.sleep(2) print('守护进程 end') p = Process(target=foo) p.start()if __name__ == '__main__': p = Process(target=foo) p.daemon =True # 把这个子进程定义为了守护进程 p.start() time.sleep(3) print('主')------------------------------------------------------#报错:AssertionError: daemonic processes are not allowed to have children
八、terminate方法
from multiprocessing import Process,current_processimport timedef foo(): print('进程 start') # print('--------------------- ',current_process().name) time.sleep(50) print('进程 end')if __name__ == '__main__': p = Process(target=foo) p.start() time.sleep(0.45)#start比terminate慢大约0.45秒 p.terminate() # 给操作系统发了一个立即终止请求 print(p.is_alive()) # True p.join() print(p.is_alive()) # False print('主')-------------------------------------------------进程 startTrueFalse主
九、pid和name属性
class Myprocess(Process): def __init__(self,person): self.name=person # name属性是Process中的属性,标示进程的名字 super().__init__() # 执行父类的初始化方法会覆盖name属性 # self.name = person # 在这里设置就可以修改进程名字了 # self.person = person # 如果不想覆盖进程名,就修改属性名称就可以了 def run(self): print('%s正在和网红脸聊天' %self.name) # print('%s正在和网红脸聊天' %self.person) time.sleep(random.randrange(1,5)) print('%s正在和网红脸聊天' %self.name) # print('%s正在和网红脸聊天' %self.person)p1=Myprocess('哪吒')p1.start()print(p1.pid) #可以查看子进程的进程id