博客
关于我
强烈建议你试试无所不能的chatGPT,快点击我
python类库32[多线程同步Lock+RLock+Semaphore+Event]
阅读量:5951 次
发布时间:2019-06-19

本文共 3055 字,大约阅读时间需要 10 分钟。

hot3.png

一 多线程同步

由于CPython的python解释器在单线程模式下执行,所以导致python的多线程在很多的时候并不能很好地发挥多核cpu的资源。大部分情况都推荐使用多进程。

python的多线程的同步与其他语言基本相同,主要包含:

Lock & RLock :用来确保多线程多共享资源的访问。

Semaphore : 用来确保一定资源多线程访问时的上限,例如资源池。 

Event : 是最简单的线程间通信的方式,一个线程可以发送信号,其他的线程接收到信号后执行操作。 

二 实例

1)Lock & RLock

Lock对象的状态可以为locked和unlocked,

使用acquire()设置为locked状态;
使用release()设置为unlocked状态。

如果当前的状态为unlocked,则acquire()会将状态改为locked然后立即返回。当状态为locked的时候,acquire()将被阻塞直到另一个线程中调用release()来将状态改为unlocked,然后acquire()才可以再次将状态置为locked。

Lock.acquire(blocking=True, timeout=-1),blocking参数表示是否阻塞当前线程等待,timeout表示阻塞时的等待时间 。如果成功地获得lock,则acquire()函数返回True,否则返回False,timeout超时时如果还没有获得lock仍然返回False。

实例:(确保只有一个线程可以访问共享资源)

import threadingimport time num = 0lock = threading.Lock() def func(st):    global num    print (threading.currentThread().getName() + ' try to acquire the lock')    if lock.acquire():        print (threading.currentThread().getName() + ' acquire the lock.' )        print (threading.currentThread().getName() +" :%s" % str(num) )        num += 1        time.sleep(st)        print (threading.currentThread().getName() + ' release the lock.'  )                lock.release() t1 = threading.Thread(target=func, args=(8,))t2 = threading.Thread(target=func, args=(4,))t3 = threading.Thread(target=func, args=(2,))t1.start()t2.start()t3.start()

结果:

RLock与Lock的区别是:RLock中除了状态locked和unlocked外还记录了当前lock的owner和递归层数,使得RLock可以被同一个线程多次acquire()。

2)Semaphore

Semaphore管理一个内置的计数器,

每当调用acquire()时内置计数器-1;

调用release() 时内置计数器+1;

计数器不能小于0;当计数器为0时,acquire()将阻塞线程直到其他线程调用release()。

实例:(同时只有2个线程可以获得semaphore,即可以限制最大连接数为2):

import threadingimport time semaphore = threading.Semaphore(2) def func():    if semaphore.acquire():        for i in range(5):          print (threading.currentThread().getName() + ' get semaphore')        semaphore.release()        print (threading.currentThread().getName() + ' release semaphore')                for i in range(4):  t1 = threading.Thread(target=func)  t1.start()

结果:

3) Event

Event内部包含了一个标志位,初始的时候为false。

可以使用使用set()来将其设置为true;
或者使用clear()将其从新设置为false;
可以使用is_set()来检查标志位的状态;
另一个最重要的函数就是wait(timeout=None),用来阻塞当前线程,直到event的内部标志位被设置为true或者timeout超时。如果内部标志位为true则wait()函数理解返回。

实例: (线程间相互通信)

import loggingimport threadingimport timelogging.basicConfig(level=logging.DEBUG,format="(%(threadName)-10s : %(message)s",)def wait_for_event_timeout(e, t):    """Wait t seconds and then timeout"""    while not e.isSet():      logging.debug("wait_for_event_timeout starting")      event_is_set = e.wait(t)      logging.debug("event set: %s" % event_is_set)    if event_is_set:      logging.debug("processing event")    else:      logging.debug("doing other work")      e = threading.Event()t2 = threading.Thread(name="nonblock",target=wait_for_event_timeout,args=(e, 2))t2.start()logging.debug("Waiting before calling Event.set()")time.sleep(7)e.set()logging.debug("Event is set")

运行结果:

三 其他

1) 线程局部变量

线程局部变量的值是跟线程相关的,区别与全局的变量。使用非常简单如下:

mydata = threading.local()

mydata.x = 1

2)对Lock,semaphore,condition等使用with关键字代替手动调用acquire()和release()。

完!

转载于:https://my.oschina.net/apoptosis/blog/125202

你可能感兴趣的文章
项目经理笔记一
查看>>
[原]Jenkins(三)---Jenkins初始配置和插件配置
查看>>
Cache Plugin 实现过程
查看>>
HBase Compaction详解
查看>>
TCP服务器端口转发: netsh
查看>>
2016OSC源创会年终盛典-架构与数据专场-张千明
查看>>
nginx实现rtmp,flv,mp4流媒体服务器
查看>>
46.tornado绑定域名或者子域名泛域名的处理
查看>>
Elasticsearch 2.2.0 插件篇:安装
查看>>
文本过滤--sed 1
查看>>
PHP CURL并发,多线程
查看>>
ES 概念及动态索引结构和索引更新机制
查看>>
iOS 开发百问(2)
查看>>
MySQL for Mac 安装和基本操作(包含后期的环境变量设置)
查看>>
Linux及windows下常见压缩程序的压缩能力对比
查看>>
JAVAEE-junit测试hibernate里的方法(hibernate交给spring管理)的问题
查看>>
MOTO MB860 国行2.3.5优化增强ROM_Top_T5_end(经典收藏版)
查看>>
C#学习经典(二)---MVC框架(Model view Controller)
查看>>
我的友情链接
查看>>
log4j配置文件说明
查看>>