Python编程:queue队列

简介: Python编程:queue队列

queue队列

先入先出队列 first in first out

import queue
q1 = queue.Queue()
q1.put(1)
q1.put(2)
q1.put(3)
print(q1.get())
print(q1.get())
print(q1.get())
# 1 2 3

后入先出队列 last in first out

import queue
q2 = queue.LifoQueue()
q2.put(1)
q2.put(2)
q2.put(3)
print(q2.get())
print(q2.get())
print(q2.get())
# 3 2 1

优先级队列

import queue
q3 = queue.PriorityQueue()
q3.put((10, 1))
q3.put((9, 2))
q3.put((8, 3))
print(q3.get())
print(q3.get())
print(q3.get())
# (8, 3)  (9, 2)  (10, 1)

生产者消费者模型

在并发编程中使用生产者和消费者模式能够解决绝大多数并发问题。

该模式通过平衡生产线程和消费线程的工作能力来提高程序的整体处理数据的速度。


为什么要使用生产者和消费者模式


在线程世界里,生产者就是生产数据的线程,消费者就是消费数据的线程。

在多线程开发当中,如果生产者处理速度很快,而消费者处理速度很慢,

那么生产者就必须等待消费者处理完,才能继续生产数据。同样的道理,

如果消费者的处理能力大于生产者,那么消费者就必须等待生产者。

为了解决这个问题于是引入了生产者和消费者模式。


什么是生产者消费者模式


生产者消费者模式是通过一个容器来解决生产者和消费者的强耦合问题。

生产者和消费者彼此之间不直接通讯,而通过阻塞队列来进行通讯,

所以生产者生产完数据之后不用等待消费者处理,直接扔给阻塞队列,

消费者不找生产者要数据,而是直接从阻塞队列里取,阻塞队列就相当于一个缓冲区,

平衡了生产者和消费者的处理能力。


实例代码

import queue, threading, time
q = queue.Queue(maxsize=10)
def producer(name):
    count = 0
    while True:
        count += 1
        q.put("包子 %s" % count)
        print("%s 生产了一个包子" % name)
        time.sleep(2)
def consumer(name):
    while True:
        print("%s 得到了 %s" % (name, q.get()))
p1 = threading.Thread(target=producer, args=("生产者1",))
c1 = threading.Thread(target=consumer, args=("消费者1",))
c2 = threading.Thread(target=consumer, args=("消费者2",))
p1.start()
c1.start()
c2.start()

阻塞队列

import queue, threading, time
q = queue.Queue()
def producer(name):
    for i in range(5):
        q.put("包子 %s" % i)
    print("等待取走")
    q.join()  # 等待通知,全部取走则继续
    print("全都取走了")
def consumer(name):
    while q.qsize() > 0:
        print("%s 得到了 %s" % (name, q.get()))
        q.task_done()  # 告知一次任务结束
p1 = threading.Thread(target=producer, args=("生产者1",))
p1.start()
c = consumer("消费者")
"""
等待取走
消费者 得到了 包子 0
消费者 得到了 包子 1
消费者 得到了 包子 2
消费者 得到了 包子 3
消费者 得到了 包子 4
全都取走了
"""


相关文章
|
3月前
|
数据采集 机器学习/深度学习 人工智能
Python:现代编程的首选语言
Python:现代编程的首选语言
319 102
|
3月前
|
数据采集 机器学习/深度学习 算法框架/工具
Python:现代编程的瑞士军刀
Python:现代编程的瑞士军刀
345 104
|
3月前
|
人工智能 自然语言处理 算法框架/工具
Python:现代编程的首选语言
Python:现代编程的首选语言
276 103
|
2月前
|
Python
Python编程:运算符详解
本文全面详解Python各类运算符,涵盖算术、比较、逻辑、赋值、位、身份、成员运算符及优先级规则,结合实例代码与运行结果,助你深入掌握Python运算符的使用方法与应用场景。
219 3
|
2月前
|
数据处理 Python
Python编程:类型转换与输入输出
本教程介绍Python中输入输出与类型转换的基础知识,涵盖input()和print()的使用,int()、float()等类型转换方法,并通过综合示例演示数据处理、错误处理及格式化输出,助你掌握核心编程技能。
483 3
|
2月前
|
并行计算 安全 计算机视觉
Python多进程编程:用multiprocessing突破GIL限制
Python中GIL限制多线程性能,尤其在CPU密集型任务中。`multiprocessing`模块通过创建独立进程,绕过GIL,实现真正的并行计算。它支持进程池、队列、管道、共享内存和同步机制,适用于科学计算、图像处理等场景。相比多线程,多进程更适合利用多核优势,虽有较高内存开销,但能显著提升性能。合理使用进程池与通信机制,可最大化效率。
300 3
|
2月前
|
Java 调度 数据库
Python threading模块:多线程编程的实战指南
本文深入讲解Python多线程编程,涵盖threading模块的核心用法:线程创建、生命周期、同步机制(锁、信号量、条件变量)、线程通信(队列)、守护线程与线程池应用。结合实战案例,如多线程下载器,帮助开发者提升程序并发性能,适用于I/O密集型任务处理。
312 0
|
3月前
|
机器学习/深度学习 人工智能 数据挖掘
Python:现代编程的首选语言
Python:现代编程的首选语言
206 82
|
3月前
|
数据采集 机器学习/深度学习 人工智能
Python:现代编程的多面手
Python:现代编程的多面手
93 0

推荐镜像

更多