问题描述
- Python如何实现多线程与多进程的配合工作?
-
#!/usr/bin/env python
#coding=utf8import multiprocessing
import threading
import threadpool
import time
import re
import os
'''
想法:
开启了11个进程,第一个进程是以多线程方式运行,再通过进程间通信来使其他进程工作.
'''
def put_test(str1): # 处理出函数名,开启多线程
print str1,
q.put(str1)
time.sleep(1)
def get_test(): # 进程池除第一个以外的进程
print ' 5'
print q.qsize(),os.getpid()
print q.get(True,1)
time.sleep(1)
###############################################################
if name=='__main__':
multiprocessing.freeze_support()
q=multiprocessing.Queue(maxsize = 10)
# 线程池
data=range(1,11)
pool=threadpool.ThreadPool(10)
requests=threadpool.makeRequests(put_test,data)
[pool.putRequest(req) for req in requests]
pool.wait()
# 进程池
pool2 = multiprocessing.Pool(processes=3)
for var in range(1,11): # 20个进程
pool2.apply_async(get_test,[])
pool2.close()
pool2.join()
print "size:",q.qsize()这段代码出问题了,求助。
解决方案
出问题具体什么问题,是不是数据同步的问题。多加一些print分析。
解决方案二:
第一点就是现在很少使用进程,用的更多是多线程
第二点多线程或者多进程最容易出现的问题就是互斥资源的处理问题,一般的处理就是加锁
还有最好提问时能把错误删除贴上,便于分析