设为首页 收藏本站
查看: 1448|回复: 0

[经验分享] [转载]python threading 用法

[复制链接]

尚未签到

发表于 2015-4-26 09:17:18 | 显示全部楼层 |阅读模式
  【source link:http://www.iyunv.com/kf/201203/124801.html】
  
  一、 Python 中的线程使用:
    Python中使用线程有两种方式:函数或者用类来包装线程对象。
  1、  函数式:调用thread模块中的start_new_thread()函数来产生新线程。如下例:



import time  
import thread  
def timer(no, interval):  
cnt = 0  
while cnt= 5:  
print 'Thread %s released! num=%s'%(name,str(num))  
mylock.release()  
thread.exit_thread()  
num+=1  
print 'Thread %s released! num=%s'%(name,str(num))  
mylock.release()  #Release the lock.  
def test():  
thread.start_new_thread(add_num, ('A',))  
thread.start_new_thread(add_num, ('B',))  
if __name__== '__main__':  
test()

  Python 在thread的基础上还提供了一个高级的线程控制库,就是之前提到过的threading。Python的threading module是在建立在thread module基础之上的一个module,在threading module中,暴露了许多thread module中的属性。在thread module中,python提供了用户级的线程同步工具“Lock”对象。而在threading module中,python又提供了Lock对象的变种: RLock对象。RLock对象内部维护着一个Lock对象,它是一种可重入的对象。对于Lock对象而言,如果一个线程连续两次进行acquire操作,那么由于第一次acquire之后没有release,第二次acquire将挂起线程。这会导致Lock对象永远不会release,使得线程死锁。RLock对象允许一个线程多次对其进行acquire操作,因为在其内部通过一个counter变量维护着线程acquire的次数。而且每一次的acquire操作必须有一个release操作与之对应,在所有的release操作完成之后,别的线程才能申请该RLock对象。
  下面来看看如何使用threading的RLock对象实现同步。



import threading
import time
mylock = threading.RLock()
num = 0
f = file("test_result.txt", 'w')
class dog(threading.Thread):
def __init__(self, name):
threading.Thread.__init__(self)
self.name = name
def run(self):
global num
while num0:
con.wait()
else:
for i in range(5):
x += 1
print "producing... "+str(x)
con.notify()
print x
con.release()
class Consumer(threading.Thread):
def __init__(self, name):
threading.Thread.__init__(self)
self.name = name
def run(self):
global x
con.acquire()
if x==0:
print "consumer wait"
con.wait()
else:
for i in range(5):
x -= 1
print "consuming... "+str(x)
con.notify()
print x
con.release()

def test():
print "start consumer\n"
th1 = Consumer("consumer")
print "start producer\n"
th2 = Producer("producer")
th1.start()
th2.start()
th1.join()
th2.join()

if __name__ == '__main__':
test()

  
  上面的例子中,在初始状态下,Consumer处于wait状态,Producer连续生产(对x执行增1操作)5次后,notify正在等待的Consumer。Consumer被唤醒开始消费(对x执行减1操作)
  
  2,  同步队列
  Python中的Queue对象也提供了对线程同步的支持。使用Queue对象可以实现多个生产者和多个消费者形成的FIFO的队列。
  生产者将数据依次存入队列,消费者依次从队列中取出数据。



import threading
import time
import Queue
import random
#producer
class Producer(threading.Thread):
def __init__(self, queue):
threading.Thread.__init__(self)
self.data = queue
def run(self):
for i in range(5):
print "%s is producing %d to the queue!\n" %(self.getName(), i)
self.data.put(i)
time.sleep(random.randrange(10)/5)
print "%s finished!\n" %(self.getName())
#consumer
class Consumer(threading.Thread):
def __init__(self, queue):
threading.Thread.__init__(self)
self.data = queue
def run(self):
for i in range(5):
something = self.data.get()
print "%s is consuming. %d in the queue is consumed!\n" %(self.getName(), something)
time.sleep(random.randrange(10))
print "%s finished!\n" %(self.getName())
def test():
queue = Queue.Queue()
th1 = Producer(queue)
th2 = Consumer(queue)
th1.start()
th2.start()
th1.join()
th2.join()
print "all threads terminate!\n"
if __name__ == '__main__':
test()

  
  在上面的例子中,Producer在随机的时间内生产一个“产品”,放入队列中。Consumer发现队列中有了“产品”,就去消费它。本例中,由于Producer生产的速度快于Consumer消费的速度,所以往往Producer生产好几个“产品”后,Consumer才消费一个产品。
  Queue模块实现了一个支持多producer和多consumer的FIFO队列。当共享信息需要安全的在多线程之间交换时,Queue非常有用。Queue的默认长度是无限的,但是可以设置其构造函数的maxsize参数来设定其长度。Queue的put方法在队尾插入,该方法的原型是:
  put( item[, block[, timeout]])
  如果可选参数block为true并且timeout为None(缺省值),线程被block,直到队列空出一个数据单元。如果timeout大于0,在timeout的时间内,仍然没有可用的数据单元,Full exception被抛出。反之,如果block参数为false(忽略timeout参数),item被立即加入到空闲数据单元中,如果没有空闲数据单元,Full exception被抛出。
  Queue的get方法是从队首取数据,其参数和put方法一样。如果block参数为true且timeout为None(缺省值),线程被block,直到队列中有数据。如果timeout大于0,在timeout时间内,仍然没有可取数据,Empty exception被抛出。反之,如果block参数为false(忽略timeout参数),队列中的数据被立即取出。如果此时没有可取数据,Empty exception也会被抛出。

运维网声明 1、欢迎大家加入本站运维交流群:群②:261659950 群⑤:202807635 群⑦870801961 群⑧679858003
2、本站所有主题由该帖子作者发表,该帖子作者与运维网享有帖子相关版权
3、所有作品的著作权均归原作者享有,请您和我们一样尊重他人的著作权等合法权益。如果您对作品感到满意,请购买正版
4、禁止制作、复制、发布和传播具有反动、淫秽、色情、暴力、凶杀等内容的信息,一经发现立即删除。若您因此触犯法律,一切后果自负,我们对此不承担任何责任
5、所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其内容的准确性、可靠性、正当性、安全性、合法性等负责,亦不承担任何法律责任
6、所有作品仅供您个人学习、研究或欣赏,不得用于商业或者其他用途,否则,一切后果均由您自己承担,我们对此不承担任何法律责任
7、如涉及侵犯版权等问题,请您及时通知我们,我们将立即采取措施予以解决
8、联系人Email:admin@iyunv.com 网址:www.yunweiku.com

所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其承担任何法律责任,如涉及侵犯版权等问题,请您及时通知我们,我们将立即处理,联系人Email:kefu@iyunv.com,QQ:1061981298 本贴地址:https://www.yunweiku.com/thread-60758-1-1.html 上篇帖子: boost 1.34 终于简化了内嵌python的支持 下篇帖子: python startswith
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

扫码加入运维网微信交流群X

扫码加入运维网微信交流群

扫描二维码加入运维网微信交流群,最新一手资源尽在官方微信交流群!快快加入我们吧...

扫描微信二维码查看详情

客服E-mail:kefu@iyunv.com 客服QQ:1061981298


QQ群⑦:运维网交流群⑦ QQ群⑧:运维网交流群⑧ k8s群:运维网kubernetes交流群


提醒:禁止发布任何违反国家法律、法规的言论与图片等内容;本站内容均来自个人观点与网络等信息,非本站认同之观点.


本站大部分资源是网友从网上搜集分享而来,其版权均归原作者及其网站所有,我们尊重他人的合法权益,如有内容侵犯您的合法权益,请及时与我们联系进行核实删除!



合作伙伴: 青云cloud

快速回复 返回顶部 返回列表