Python3标准库：threading进程中管理并发操作

1. threading进程中管理并发操作

threading模块提供了管理多个线程执行的api，允许程序在同一个进程空间并发的运行多个操作。

1.1 thread对象

要使用thread，最简单的方法就是用一个目标函数实例化一个thread对象，并调用start()让它开始工作。

import threading

def worker():
    """thread worker function"""
    print('worker')

threads = []
for i in range(5):
    t = threading.thread(target=worker)
    threads.append(t)
    t.start()

输出有5行，每一行都是"worker"。

如果能够创建一个线程，并向它传递参数告诉它要完成什么工作，那么这会很有用。任何类型的对象都可以作为参数传递到线程。下面的例子传递了一个数，线程将打印出这个数。

import threading

def worker(num):
    """thread worker function"""
    print('worker: %s' % num)

threads = []
for i in range(5):
    t = threading.thread(target=worker, args=(i,))
    threads.append(t)
    t.start()

现在这个整数参数会包含在各线程打印的消息中。

1.2 确定当前线程

使用参数来标识或命名线程很麻烦，也没有必要。每个thread实例都有一个带有默认值的名，该默认值可以在创建线程时改变。如果服务器进程中有多个服务线程处理不同的操作，那么在这样的服务器进程中，对线程命名就很有用。

import threading
import time

def worker():
    print(threading.current_thread().getname(), 'starting')
    time.sleep(0.2)
    print(threading.current_thread().getname(), 'exiting')

def my_service():
    print(threading.current_thread().getname(), 'starting')
    time.sleep(0.3)
    print(threading.current_thread().getname(), 'exiting')

t = threading.thread(name='my_service', target=my_service)
w = threading.thread(name='worker', target=worker)
w2 = threading.thread(target=worker)  # use default name

w.start()
w2.start()
t.start()

调试输出的每一行中包含有当前线程的名。线程名列中有"thread-1"的行对应未命名的线程w2。

大多数程序并不使用print来进行调试。logging模块支持将线程名嵌入到各个日志消息中(使用格式化代码%(threadname)s)。通过把线程名包含在日志消息中，就能跟踪这些消息的来源。

import logging
import threading
import time

def worker():
    logging.debug('starting')
    time.sleep(0.2)
    logging.debug('exiting')

def my_service():
    logging.debug('starting')
    time.sleep(0.3)
    logging.debug('exiting')

logging.basicconfig(
    level=logging.debug,
    format='[%(levelname)s] (%(threadname)-10s) %(message)s',
)

t = threading.thread(name='my_service', target=my_service)
w = threading.thread(name='worker', target=worker)
w2 = threading.thread(target=worker)  # use default name

w.start()
w2.start()
t.start()

而且logging是线程安全的，所以来自不同线程的消息在输出中会有所区分。

1.3 守护与非守护线程

到目前为止，示例程序都在隐式地等待所有线程完成工作之后才退出。不过，程序有
时会创建一个线程作为守护线程（daemon)，这个线程可以一直运行而不阻塞主程序退出。
如果一个服务不能很容易地中断线程，或者即使让线程工作到一半时中止也不会造成数据
损失或破坏（例如，为一个服务监控工具生成“心跳”的线程），那么对于这些服务，使用
守护线程就很有用。要标志一个线程为守护线程，构造线程时便要传入daemon=true或
者要调用它的setdaemon()方法并提供参数true。默认情况下线程不作为守护线程。

import threading
import time
import logging

def daemon():
    logging.debug('starting')
    time.sleep(0.2)
    logging.debug('exiting')

def non_daemon():
    logging.debug('starting')
    logging.debug('exiting')

logging.basicconfig(
    level=logging.debug,
    format='(%(threadname)-10s) %(message)s',
)

d = threading.thread(name='daemon', target=daemon, daemon=true)

t = threading.thread(name='non-daemon', target=non_daemon)

d.start()
t.start()

这个代码的输出中不包含守护线程的“exiting“消息，因为在从sleep()调用唤醒
守护线程之前，所有非守护线程（包括主线程）已经退出。

要等待一个守护线程完成工作，需要使用join()方法。

import threading
import time
import logging

def daemon():
    logging.debug('starting')
    time.sleep(0.2)
    logging.debug('exiting')

def non_daemon():
    logging.debug('starting')
    logging.debug('exiting')

logging.basicconfig(
    level=logging.debug,
    format='(%(threadname)-10s) %(message)s',
)

d = threading.thread(name='daemon', target=daemon, daemon=true)

t = threading.thread(name='non-daemon', target=non_daemon)

d.start()
t.start()

d.join()
t.join()

使用join()等待守护线程退出意味着它有机会生成它的"exiting"消息。

默认地，join()会无限阻塞。或者，还可以传入一个浮点值，表示等待线程在多长
时间（秒数）后变为不活动。即使线程在这个时间段内未完成，join()也会返回。

import threading
import time
import logging

def daemon():
    logging.debug('starting')
    time.sleep(0.2)
    logging.debug('exiting')

def non_daemon():
    logging.debug('starting')
    logging.debug('exiting')

logging.basicconfig(
    level=logging.debug,
    format='(%(threadname)-10s) %(message)s',
)

d = threading.thread(name='daemon', target=daemon, daemon=true)

t = threading.thread(name='non-daemon', target=non_daemon)

d.start()
t.start()

d.join(0.1)
print('d.isalive()', d.isalive())
t.join()

由于传人的超时时间小于守护线程睡眠的时间，所以join()返回之后这个线程仍是"活着"。

1.4 枚举所有线程

没有必要为所有守护线程维护一个显示句柄来确保它们在退出主进程之前已经完成。

enumerate()会返回活动 thread实例的一个列表。这个列表也包括当前线程，由于等
待当前线程终止（join)会引入一种死锁情况，所以必须跳过。

import random
import threading
import time
import logging

def worker():
    """thread worker function"""
    pause = random.randint(1, 5) / 10
    logging.debug('sleeping %0.2f', pause)
    time.sleep(pause)
    logging.debug('ending')

logging.basicconfig(
    level=logging.debug,
    format='(%(threadname)-10s) %(message)s',
)

for i in range(3):
    t = threading.thread(target=worker, daemon=true)
    t.start()

main_thread = threading.main_thread()
for t in threading.enumerate():
    if t is main_thread:
        continue
    logging.debug('joining %s', t.getname())
    t.join()

由于工作线程睡眠的时间量是随机的，所以这个程序的输出可能有变化。

1.5 派生线程

开始时，thread要完成一些基本初始化，然后调用其run()方法，这会调用传递到构造函数的目标函数。要创建thread的一个子类，需要覆盖run()来完成所需的工作。

import threading
import logging

class mythread(threading.thread):

    def run(self):
        logging.debug('running')

logging.basicconfig(
    level=logging.debug,
    format='(%(threadname)-10s) %(message)s',
)

for i in range(5):
    t = mythread()
    t.start()

run()的返回值将被忽略。

由于传递到thread构造函数的args和kwargs值保存在私有变量中（这些变量名都有前缀），所以不能很容易地从子类访问这些值。要向一个定制的线程类型传递参数，需要重新定义构造函数，将这些值保存在子类可见的一个实例属性中。

import threading
import logging

class mythreadwithargs(threading.thread):

    def __init__(self, group=none, target=none, name=none,
                 args=(), kwargs=none, *, daemon=none):
        super().__init__(group=group, target=target, name=name,
                         daemon=daemon)
        self.args = args
        self.kwargs = kwargs

    def run(self):
        logging.debug('running with %s and %s',
                      self.args, self.kwargs)

logging.basicconfig(
    level=logging.debug,
    format='(%(threadname)-10s) %(message)s',
)

for i in range(5):
    t = mythreadwithargs(args=(i,), kwargs={'a': 'a', 'b': 'b'})
    t.start()

mythreadwithargs使用的api与thread相同，不过类似于其他定制类，这个类可以轻松地修改构造函数方法，以取得更多参数或者与线程用途更直接相关的不同参数。

1.6 定时器线程

有时出于某种原因需要派生thread，timer就是这样一个例子，timer也包含在threading中。timer在一个延迟之后开始工作，而且可以在这个延迟期间内的任意时刻被取消。

import threading
import time
import logging

def delayed():
    logging.debug('worker running')

logging.basicconfig(
    level=logging.debug,
    format='(%(threadname)-10s) %(message)s',
)

t1 = threading.timer(0.3, delayed)
t1.setname('t1')
t2 = threading.timer(0.3, delayed)
t2.setname('t2')

logging.debug('starting timers')
t1.start()
t2.start()

logging.debug('waiting before canceling %s', t2.getname())
time.sleep(0.2)
logging.debug('canceling %s', t2.getname())
t2.cancel()
logging.debug('done')

这个例子中，第二个定时器永远不会运行，看起来第一个定时器在主程序的其余部分完成之后还会运行。由于这不是一个守护线程，所以在主线程完成时其会隐式退出。

1.7 线程间传送信号

尽管使用多线程的目的是并发地运行单独的操作，但有时也需要在两个或多个线程中同步操作。事件对象是实现线程间安全通信的一种简单方法。event管理一个内部标志，调用者可以用set（)和clear（)方法控制这个标志。其他线程可以使用wait（)暂停，直到这个标志被设置，可有效地阻塞进程直至允许这些线程继续。

import logging
import threading
import time

def wait_for_event(e):
    """wait for the event to be set before doing anything"""
    logging.debug('wait_for_event starting')
    event_is_set = e.wait()
    logging.debug('event set: %s', event_is_set)

def wait_for_event_timeout(e, t):
    """wait t seconds and then timeout"""
    while not e.is_set():
        logging.debug('wait_for_event_timeout starting')
        event_is_set = e.wait(t)
        logging.debug('event set: %s', event_is_set)
        if event_is_set:
            logging.debug('processing event')
        else:
            logging.debug('doing other work')

logging.basicconfig(
    level=logging.debug,
    format='(%(threadname)-10s) %(message)s',
)

e = threading.event()
t1 = threading.thread(
    name='block',
    target=wait_for_event,
    args=(e,),
)
t1.start()

t2 = threading.thread(
    name='nonblock',
    target=wait_for_event_timeout,
    args=(e, 2),
)
t2.start()

logging.debug('waiting before calling event.set()')
time.sleep(0.3)
e.set()
logging.debug('event is set')

wait()方法取一个参数，表示等待事件的时间（秒数），达到这个时间后就超时。它
会返回一个布尔值，指示事件是否已设置，使调用者知道wait()为什么返回。可以对事
件单独地使用is_set()方法而不必担心阻塞。

在这个例子中，wait_for_event_timeout()将检查事件状态而不会无限阻塞。wait_for_event()在wait()调用的位置阻塞，事件状态改变之前它不会返回。

1.8 控制资源访问

除了同步线程操作，还有一点很重要，要能够控制对共享资源的访问，从而避免破坏或丢失数据。python的内置数据结构（列表、字典等）是线程安全的，这是python使用原子字节码来管理这些数据结构的一个副作用（更新过程中不会释放保护python内部数据结构的全局解释器锁gil（global interpreter lock))。python中实现的其他数据结构或更简单的类型（如整数和浮点数）则没有这个保护。要保证同时安全地访问一个对象，可以使用一个lock对象。

import logging
import random
import threading
import time

class counter:

    def __init__(self, start=0):
        self.lock = threading.lock()
        self.value = start

    def increment(self):
        logging.debug('waiting for lock')
        self.lock.acquire()
        try:
            logging.debug('acquired lock')
            self.value = self.value + 1
        finally:
            self.lock.release()

def worker(c):
    for i in range(2):
        pause = random.random()
        logging.debug('sleeping %0.02f', pause)
        time.sleep(pause)
        c.increment()
    logging.debug('done')

logging.basicconfig(
    level=logging.debug,
    format='(%(threadname)-10s) %(message)s',
)

counter = counter()
for i in range(2):
    t = threading.thread(target=worker, args=(counter,))
    t.start()

logging.debug('waiting for worker threads')
main_thread = threading.main_thread()
for t in threading.enumerate():
    if t is not main_thread:
        t.join()
logging.debug('counter: %d', counter.value)

在这个例子中，worker()函数使一个counter实例递增，这个实例管理着一个lock，以避免两个线程同时改变其内部状态。如果没有使用lock，就有可能丢失一次对value属性的修改。

要确定是否有另一个线程请求这个锁而不影响当前线程，可以向acquire()的blocking参数传入false。在下一个例子中，worker()想要分别得到3次锁，并统计为得到锁而尝试的次数。与此同时，lock_holder()在占有和释放锁之间循环，每个状态会短暂暂停，以模拟负载情况。

import logging
import threading
import time

def lock_holder(lock):
    logging.debug('starting')
    while true:
        lock.acquire()
        try:
            logging.debug('holding')
            time.sleep(0.5)
        finally:
            logging.debug('not holding')
            lock.release()
        time.sleep(0.5)

def worker(lock):
    logging.debug('starting')
    num_tries = 0
    num_acquires = 0
    while num_acquires < 3:
        time.sleep(0.5)
        logging.debug('trying to acquire')
        have_it = lock.acquire(0)
        try:
            num_tries += 1
            if have_it:
                logging.debug('iteration %d: acquired',
                              num_tries)
                num_acquires += 1
            else:
                logging.debug('iteration %d: not acquired',
                              num_tries)
        finally:
            if have_it:
                lock.release()
    logging.debug('done after %d iterations', num_tries)

logging.basicconfig(
    level=logging.debug,
    format='(%(threadname)-10s) %(message)s',
)

lock = threading.lock()

holder = threading.thread(
    target=lock_holder,
    args=(lock,),
    name='lockholder',
    daemon=true,
)
holder.start()

worker = threading.thread(
    target=worker,
    args=(lock,),
    name='worker',
)
worker.start()

worker()需要超过3次迭代才能得到3次锁。

1.8.1 再入锁

正常的lock对象不能请求多次，即使是由同一个线程请求也不例外。如果同一个调用链中的多个函数访问一个锁，则可能会产生我们不希望的副作用。

import threading

lock = threading.lock()

print('first try :', lock.acquire())
print('second try:', lock.acquire(0))

在这里，对第二个acquire()调用给定超时值为0，以避免阻塞，因为锁已经被第一个调用获得。

如果同一个线程的不同代码需要"重新获得"锁，那么在这种情况下要使用rlock。

import threading

lock = threading.rlock()

print('first try :', lock.acquire())
print('second try:', lock.acquire(0))

与前面的例子相比，对代码唯一的修改就是用rlock替换lock。

1.8.2 锁作为上下文管理器

锁实现了上下文管理器api，并与with语句兼容。使用with则不再需要显式地获得和释放锁。

import threading
import logging

def worker_with(lock):
    with lock:
        logging.debug('lock acquired via with')

def worker_no_with(lock):
    lock.acquire()
    try:
        logging.debug('lock acquired directly')
    finally:
        lock.release()

logging.basicconfig(
    level=logging.debug,
    format='(%(threadname)-10s) %(message)s',
)

lock = threading.lock()
w = threading.thread(target=worker_with, args=(lock,))
nw = threading.thread(target=worker_no_with, args=(lock,))

w.start()
nw.start()

函数worker_with()和worker_no_with()用等价的方式管理锁。

1.9 同步线程

除了使用event，还可以通过使用一个condition对象来同步线程。由于condition使用了一个lock，所以它可以绑定到一个共享资源，允许多个线程等待资源更新。在下一个例子中，consumer()线程要等待设置了condition才能继续。producer()线程负责设置条件，以及通知其他线程继续。

import logging
import threading
import time

def consumer(cond):
    """wait for the condition and use the resource"""
    logging.debug('starting consumer thread')
    with cond:
        cond.wait()
        logging.debug('resource is available to consumer')

def producer(cond):
    """set up the resource to be used by the consumer"""
    logging.debug('starting producer thread')
    with cond:
        logging.debug('making resource available')
        cond.notifyall()

logging.basicconfig(
    level=logging.debug,
    format='%(asctime)s (%(threadname)-2s) %(message)s',
)

condition = threading.condition()
c1 = threading.thread(name='c1', target=consumer,
                      args=(condition,))
c2 = threading.thread(name='c2', target=consumer,
                      args=(condition,))
p = threading.thread(name='p', target=producer,
                     args=(condition,))

c1.start()
time.sleep(0.2)
c2.start()
time.sleep(0.2)
p.start()

这些线程使用with来获得与condition关联的锁。也可以显式地使用acquire()和release()方法。

屏障（barrier）是另一种线程同步机制。barrier会建立一个控制点，所有参与线程会在这里阻塞，直到所有这些参与“方”都到达这一点。采用这种方法，线程可以单独启动然后暂停，直到所有线程都准备好才可以继续。

import threading
import time

def worker(barrier):
    print(threading.current_thread().name,
          'waiting for barrier with {} others'.format(
              barrier.n_waiting))
    worker_id = barrier.wait()
    print(threading.current_thread().name, 'after barrier',
          worker_id)

num_threads = 3

barrier = threading.barrier(num_threads)

threads = [
    threading.thread(
        name='worker-%s' % i,
        target=worker,
        args=(barrier,),
    )
    for i in range(num_threads)
]

for t in threads:
    print(t.name, 'starting')
    t.start()
    time.sleep(0.1)

for t in threads:
    t.join()

在这个例子中，barrier被配置为会阻塞线程，直到3个线程都在等待。满足这个条件时，所有线程被同时释放从而越过这个控制点。wait()的返回值指示了释放的参与线程数，可以用来限制一些线程做清理资源等动作。

barrier的abort()方法会使所有等待线程接收一个brokenbarriererror。如果线程在wait()上被阻塞而停止处理，这就允许线程完成清理工作。

import threading
import time

def worker(barrier):
    print(threading.current_thread().name,
          'waiting for barrier with {} others'.format(
              barrier.n_waiting))
    try:
        worker_id = barrier.wait()
    except threading.brokenbarriererror:
        print(threading.current_thread().name, 'aborting')
    else:
        print(threading.current_thread().name, 'after barrier',
              worker_id)

num_threads = 3

barrier = threading.barrier(num_threads + 1)

threads = [
    threading.thread(
        name='worker-%s' % i,
        target=worker,
        args=(barrier,),
    )
    for i in range(num_threads)
]

for t in threads:
    print(t.name, 'starting')
    t.start()
    time.sleep(0.1)

barrier.abort()

for t in threads:
    t.join()

这个例子将barrier配置为多加一个线程，即需要比实际启动的线程再多一个参与线程，所以所有线程中的处理都会阻塞。在被阻塞的各个线程中，abort()调用会产生一个异常。

1.10 限制资源的并发访问

有时可能需要允许多个工作线程同时访问一个资源，但要限制总数。例如，连接池支持同时连接，但数目可能是固定的，或者一个网络应用可能支持固定数目的并发下载。这些连接就可以使用semaphore来管理。

import logging
import threading
import time

class activepool:

    def __init__(self):
        super(activepool, self).__init__()
        self.active = []
        self.lock = threading.lock()

    def makeactive(self, name):
        with self.lock:
            self.active.append(name)
            logging.debug('running: %s', self.active)

    def makeinactive(self, name):
        with self.lock:
            self.active.remove(name)
            logging.debug('running: %s', self.active)

def worker(s, pool):
    logging.debug('waiting to join the pool')
    with s:
        name = threading.current_thread().getname()
        pool.makeactive(name)
        time.sleep(0.1)
        pool.makeinactive(name)

logging.basicconfig(
    level=logging.debug,
    format='%(asctime)s (%(threadname)-2s) %(message)s',
)

pool = activepool()
s = threading.semaphore(2)
for i in range(4):
    t = threading.thread(
        target=worker,
        name=str(i),
        args=(s, pool),
    )
    t.start()

在这个例子中，activepool类只作为一种便利方法，用来跟踪某个给定时刻哪些线程能够运行。真正的资源池会为新的活动线程分配一个连接或另外某个值，并且当这个线程工作完成时再回收这个值。在这里，资源池只是用来保存活动线程的名，以显示至少有两个线程在并发运行。

1.11 线程特定的数据

有些资源需要锁定以便多个线程使用，另外一些资源则需要保护，以使它们对并非是这些资源的“所有者”的线程隐藏。local()函数会创建一个对象，它能够隐藏值，使其在不同线程中无法被看到。

import random
import threading
import logging

def show_value(data):
    try:
        val = data.value
    except attributeerror:
        logging.debug('no value yet')
    else:
        logging.debug('value=%s', val)

def worker(data):
    show_value(data)
    data.value = random.randint(1, 100)
    show_value(data)

logging.basicconfig(
    level=logging.debug,
    format='(%(threadname)-10s) %(message)s',
)

local_data = threading.local()
show_value(local_data)
local_data.value = 1000
show_value(local_data)

for i in range(2):
    t = threading.thread(target=worker, args=(local_data,))
    t.start()

属性local_data.value对所有线程都不可见，除非在某个线程中设置了这个属性，这个线程才能看到它。

要初始化设置以使所有线程在开始时都有相同的值，可以使用一个子类，并在_init_()中设置这些属性。

import random
import threading
import logging

def show_value(data):
    try:
        val = data.value
    except attributeerror:
        logging.debug('no value yet')
    else:
        logging.debug('value=%s', val)

def worker(data):
    show_value(data)
    data.value = random.randint(1, 100)
    show_value(data)

class mylocal(threading.local):

    def __init__(self, value):
        super().__init__()
        logging.debug('initializing %r', self)
        self.value = value

logging.basicconfig(
    level=logging.debug,
    format='(%(threadname)-10s) %(message)s',
)

local_data = mylocal(1000)
show_value(local_data)

for i in range(2):
    t = threading.thread(target=worker, args=(local_data,))
    t.start()

这会在相同的对象上调用_init_()（注意id()值)，每个线程中调用一次以设置默认值。