【python】】Python 的 queue 模块使用笔记

简介: 【python】】Python 的 queue 模块使用笔记

@[python](Python 的 queue 模块使用笔记)

Python 的 queue 模块提供了同步队列实现,用于在多线程编程中安全地交换数据。以下是 queue 模块的一些主要类型和用法。


一、queue 模块

queue 模块包含以下几种类型的队列:

  • queue.Queue:先进先出(FIFO)队列。
  • queue.LifoQueue:后进先出(LIFO)队列,类似于栈。
  • queue.PriorityQueue:优先级队列,按优先级顺序处理元素。

二、示例代码

2.1. queue.Queue

这是一个典型的 FIFO 队列示例:

import time
import threading
import queue

# 创建一个 FIFO 队列
qFifo = queue.Queue(maxsize=10)

def producer():
    for i in range(10):
        qFifo.put(i)
        print(f'Produced {i}')
        time.sleep(1)

def consumer():
    while True:
        item = qFifo.get()
        if item is None:
            break
        print(f'Consumed {item}')
        qFifo.task_done()

# 创建生产者和消费者线程
prod_thread = threading.Thread(target=producer)
cons_thread = threading.Thread(target=consumer)

prod_thread.start()
cons_thread.start()

prod_thread.join()

# 停止消费者线程
qFifo.put(None)
cons_thread.join()

2.2. queue.LifoQueue

这是一个后进先出(LIFO)队列示例:

import queue
import threading
import time

# 后进先出(LIFO)队列
qLifo = queue.LifoQueue(maxsize=10)

def producer():
    for i in range(10):
        qLifo.put(i)
        print(f'Produced {i}')
        time.sleep(1)

def consumer():
    while True:
        item = qLifo.get()
        if item is None:
            break
        print(f'Consumed {item}')
        qLifo.task_done()

# 创建生产者和消费者线程
prod_thread = threading.Thread(target=producer)
cons_thread = threading.Thread(target=consumer)

prod_thread.start()
cons_thread.start()

prod_thread.join()

# 停止消费者线程
qLifo.put(None)
cons_thread.join()

2.3. queue.PriorityQueue

这是一个优先级队列示例:

import queue
import threading
import time

# 优先级队列,按优先级顺序处理元素
qPrio = queue.PriorityQueue()

def producer():
    for i in range(10):
        qPrio.put((i, f'Item {i}'))
        print(f'Produced Item {i}')
        time.sleep(1)

def consumer():
    while True:
        item = qPrio.get()
        if item is None:
            break
        priority, value = item
        print(f'Consumed {value}')
        qPrio.task_done()

# 创建生产者和消费者线程
prod_thread = threading.Thread(target=producer)
cons_thread = threading.Thread(target=consumer)

prod_thread.start()
cons_thread.start()

prod_thread.join()

# 停止消费者线程
qPrio.put(None)
cons_thread.join()

三、主要方法

  • put(item, block=True, timeout=None):将 item 放入队列。block 和 timeout 控制是否阻塞。
  • get(block=True, timeout=None):从队列中取出一个 item。block 和 timeout 控制是否阻塞。
  • task_done():标记一个任务已经完成。必须在 get() 后调用。
  • join():等待队列中所有任务完成。


这些队列类型和方法可以在多线程程序中有效地管理数据交换。

四、代码

queue 模块的一些主要类型和用法


相关文章
|
5月前
|
SQL 关系型数据库 数据库
Python SQLAlchemy模块:从入门到实战的数据库操作指南
免费提供Python+PyCharm编程环境,结合SQLAlchemy ORM框架详解数据库开发。涵盖连接配置、模型定义、CRUD操作、事务控制及Alembic迁移工具,以电商订单系统为例,深入讲解高并发场景下的性能优化与最佳实践,助你高效构建数据驱动应用。
660 7
|
5月前
|
监控 安全 程序员
Python日志模块配置:从print到logging的优雅升级指南
从 `print` 到 `logging` 是 Python 开发的必经之路。`print` 调试简单却难维护,日志混乱、无法分级、缺乏上下文;而 `logging` 支持级别控制、多输出、结构化记录,助力项目可维护性升级。本文详解痛点、优势、迁移方案与最佳实践,助你构建专业日志系统,让程序“有记忆”。
433 0
|
8月前
|
编解码 数据安全/隐私保护 Python
抖音批量发布视频工具,自动上传视频作品笔记,python发布软件
这个抖音批量发布工具包含三个主要模块:主上传程序、配置文件和视频预处理工具。主程序
|
5月前
|
JSON 算法 API
Python中的json模块:从基础到进阶的实用指南
本文深入解析Python内置json模块的使用,涵盖序列化与反序列化核心函数、参数配置、中文处理、自定义对象转换及异常处理,并介绍性能优化与第三方库扩展,助你高效实现JSON数据交互。(238字)
523 4
|
5月前
|
Java 调度 数据库
Python threading模块:多线程编程的实战指南
本文深入讲解Python多线程编程,涵盖threading模块的核心用法:线程创建、生命周期、同步机制(锁、信号量、条件变量)、线程通信(队列)、守护线程与线程池应用。结合实战案例,如多线程下载器,帮助开发者提升程序并发性能,适用于I/O密集型任务处理。
506 0
|
5月前
|
XML JSON 数据处理
超越JSON:Python结构化数据处理模块全解析
本文深入解析Python中12个核心数据处理模块,涵盖csv、pandas、pickle、shelve、struct、configparser、xml、numpy、array、sqlite3和msgpack,覆盖表格处理、序列化、配置管理、科学计算等六大场景,结合真实案例与决策树,助你高效应对各类数据挑战。(238字)
603 0
|
6月前
|
安全 大数据 程序员
Python operator模块的methodcaller:一行代码搞定对象方法调用的黑科技
`operator.methodcaller`是Python中处理对象方法调用的高效工具,替代冗长Lambda,提升代码可读性与性能。适用于数据过滤、排序、转换等场景,支持参数传递与链式调用,是函数式编程的隐藏利器。
212 4
|
6月前
|
存储 数据库 开发者
Python SQLite模块:轻量级数据库的实战指南
本文深入讲解Python内置sqlite3模块的实战应用,涵盖数据库连接、CRUD操作、事务管理、性能优化及高级特性,结合完整案例,助你快速掌握SQLite在小型项目中的高效使用,是Python开发者必备的轻量级数据库指南。
529 0
|
7月前
|
存储 安全 数据处理
Python 内置模块 collections 详解
`collections` 是 Python 内置模块,提供多种高效数据类型,如 `namedtuple`、`deque`、`Counter` 等,帮助开发者优化数据处理流程,提升代码可读性与性能,适用于复杂数据结构管理与高效操作场景。
462 0
|
8月前
|
数据安全/隐私保护 Python
抖音私信脚本app,协议私信群发工具,抖音python私信模块
这个实现包含三个主要模块:抖音私信核心功能类、辅助工具类和主程序入口。核心功能包括登录

推荐镜像

更多