Python多线程编程(6寸)[借鉴].pdfVIP

2. 线程和进程 3. 线程和 Python 4. thread 模块 5. threading 模块 6. 生产者 - 消费者问题和 Queue模块 7. 相关模块 本节中，我们将探索在 Python 中，用多线程编 程技术实现代码并行性的几种不同的方法。在前面几 节中，我们将介绍进程与线程的区别。然后介绍多线 程编程的概念。（已经熟悉多线程编程的读者可以直 接跳到第 1.3.5 节）。本章的最后几节将演示在 Python 中如何使用 threading 和 Queue模块来实现 多线程编程。 1.1 引言 在多线程（ MT）编程出现之前，电脑程序的运行 由一个执行序列组成，执行序列按顺序在主机的中央 处理器（ CPU）中运行。无论是任务本身要求顺序执 行还是整个程序是由多个子任务组成，程序都是按这 种方式执行的。即使子任务相互独立，互相无关 （即，一个子任务的结果不影响其它子任务的结果） 时也是这样。这样是不是有点不合逻辑？会不会想要 程的目的。 多线程编程对于某些任务来说，是最理想的。这 些任务具有以下特点：它们本质上就是异步的，需要 有多个并发事务，各个事务的运行顺序可以是不确定 的，随机的，不可预测的。这样的编程任务可以被分 成多个执行流，每个流都有一个要完成的目标。根据 应用的不同，这些子任务可能都要计算出一个中间结 果，用于合并得到最后的结果。 运算密集型的任务一般都比较容易分隔成多个子 任务，可以顺序执行或以多线程的方式执行。单线程 处理多个外部输入源的的任务就不是那么容易了。这 种编程任务如果不用多线程的方式处理，则一定要使 用一个或多个计时器来实现。 一个顺序执行的程序要从每个 I/O( 输入/ 输出) 终端信道检查用户的输入时，程序无论如何也不能在 读取 I/O 终端信道的时候阻塞。因为用户输入的到达 是不确定的，阻塞会导致其它 I/O 信息的数据不能被 处理。顺序执行的程序必须使用非阻塞 I/O ，或是带 有计时器的阻塞 I/O （这样才能保证阻塞只是暂时 的）。 由于顺序执行的程序只有一个线程在运行。它要 保证它要做的多任务，不会有某个任务占用太多的时 理解。 使用多线程编程和一个共享的数据结构如 Queue （本章后面会介绍的一种多线程队列数据结构），这 种程序任务可以用几个功能单一的线程来组织： UserRequestThread: 负责读取客户的输入，可 能是一个 I/O 信道。程序可能创建多个线程，每个客 户一个，请求会被放入队列中。 RequestProcessor: 一个负责从队列中获取并处 理请求的线程，它为下面那种线程提供输出。 ReplyThread: 负责把给用户的输出取出来，如 果是网络应用程序就把结果发送出去，否则就保存到 本地文件系统或数据库中。 把这种编程任务用多线程来组织可以降低程序的 复杂度，并使得干净，有效和具有良好组织地程序结 构实现变得可能。每个线程的逻辑都不会很复杂，因 为它要做的事情很清楚。例如 UserRequestThread 只是从用户或某个数据源读取数据，放到一个队列 中，等待其它线程进一步的处理，等等，每个线程都 有自己明确的任务。你只要设计好每个线程要做什 么，并把要做的事做好就可以了。对某些任务使用线 程跟亨利福特制造汽车时使用的装配线模型有些相 似。 计算机程序只不过是磁盘中可执行的