0

0

在Python中模拟Go语言的Select通道操作

碧海醫心

碧海醫心

发布时间:2025-11-01 12:15:22

|

150人浏览过

|

来源于php中文网

原创

在Python中模拟Go语言的Select通道操作

本教程探讨了如何在python中模拟go语言强大的`select`语句,以实现对多个并发通信通道的监听和处理。通过结合python的`threading`模块和`queue`数据结构,文章展示了如何构建一个中央消息转发机制,从而高效地管理来自不同生产者线程的消息,并提供了一个可复用的`select`函数实现,同时分析了与go原生`select`的异同。

1. Go语言select语句概述及其在并发编程中的作用

Go语言的select语句是其并发模型中的一个核心特性,它允许Goroutine同时等待多个通信操作(即通道操作)。当多个通道都准备好进行通信时,select会随机选择一个执行;如果只有一个通道准备好,则执行该通道的操作;如果所有通道都未准备好,select会阻塞直到其中一个通道准备就绪。这种机制极大地简化了复杂的并发模式,如超时处理、优先级处理和优雅地关闭Goroutine等。

在Python中,虽然没有直接对应的select语句,但我们可以利用其内置的threading模块和queue(Python 2中为Queue)数据结构来模拟类似的行为,以实现多通道的并发监听。

2. 基于线程和队列的select模拟实现

立即学习Python免费学习笔记(深入)”;

为了在Python中模拟Go的select行为,我们需要解决两个主要问题:如何表示通道,以及如何监听多个通道并响应第一个就绪的通道。

Python精要参考 pdf版
Python精要参考 pdf版

这本书给出了一份关于python这门优美语言的精要的参考。作者通过一个完整而清晰的入门指引将你带入python的乐园,随后在语法、类型和对象、运算符与表达式、控制流函数与函数编程、类及面向对象编程、模块和包、输入输出、执行环境等多方面给出了详尽的讲解。如果你想加入 python的世界,David M beazley的这本书可不要错过哦。 (封面是最新英文版的,中文版貌似只译到第二版)

下载
  • 通道表示: Python的queue.Queue是实现线程间安全通信的理想选择,它可以作为Go语言通道的等价物。
  • 多通道监听: 我们可以为每个需要监听的Queue创建一个独立的辅助线程。这些辅助线程的任务是持续从其对应的Queue中读取消息,然后将消息连同其来源Queue的标识一起转发到一个中央的“组合”Queue中。主线程只需从这个中央Queue中获取消息,并根据来源标识进行相应的处理。

下面是一个基本的实现示例,它模拟了Go语言中一个典型的select使用场景:

import threading
import queue # 在Python 3中,Queue模块被重命名为queue

def main_simulation_basic():
    # 模拟Go语言中的通道
    c1 = queue.Queue(maxsize=0)
    c2 = queue.Queue(maxsize=0)
    quit_channel = queue.Queue(maxsize=0) # 使用更具描述性的名称

    # 模拟Go语言中的Goroutine:生产者函数1
    def producer_func1():
        for i in range(10):
            c1.put(i)
        quit_channel.put(0) # 完成后发送退出信号

    # 启动生产者线程1
    threading.Thread(target=producer_func1).start()

    # 模拟Go语言中的Goroutine:生产者函数2
    def producer_func2():
        for i in range(2):
            c2.put(i)

    # 启动生产者线程2
    threading.Thread(target=producer_func2).start()

    # 创建一个中央队列,用于收集所有通道的消息
    combined_queue = queue.Queue(maxsize=0)

    # 辅助函数:监听一个队列并将消息转发到combined_queue
    def listen_and_forward(source_queue):
        while True:
            # 获取消息,并将其与源队列一起放入combined_queue
            # (source_queue, message) 这种元组结构用于标识消息来源
            message = source_queue.get()
            combined_queue.put((source_queue, message))
            # 注意:这里需要一个机制来优雅地停止这些转发线程,
            # 否则它们会一直运行。对于本例,我们依赖主线程退出时守护线程自动终止。

    # 为每个通道启动一个转发线程
    t_c1 = threading.Thread(target=listen_and_forward, args=(c1,))
    t_c1.daemon = True # 设置为守护线程,主线程退出时自动终止
    t_c1.start()

    t_c2 = threading.Thread(target=listen_and_forward, args=(c2,))
    t_c2.daemon = True
    t_c2.start()

    t_quit = threading.Thread(target=listen_and_forward, args=(quit_channel,))
    t_quit.daemon = True
    t_quit.start()

    # 主循环:从combined_queue中获取消息并处理
    while True:
        which_queue, message = combined_queue.get()
        if which_queue is c1:
            print(f'Received value from c1: {message}')
        elif which_queue is c2:
            print(f'Received value from c2: {message}')
        elif which_queue is quit_channel:
            print('Received quit signal. Exiting.')
            break # 收到退出信号,终止循环

# 调用主模拟函数
if __name__ == '__main__':
    main_simulation_basic()

在这个实现中,producer_func1和producer_func2是模拟并发生产者的函数,它们将数据放入各自的c1和c2队列。listen_and_forward函数为每个通道创建了一个守护线程,负责将消息转发到combined_queue。主循环则从combined_queue中取出消息,并根据消息的来源(which_queue)进行相应的处理。当从quit_channel收到信号时,程序优雅地退出。

3. 封装为可重用的select函数

上述模式虽然有效,但每次需要监听多个通道时都需要重复编写创建转发线程和主循环的逻辑。我们可以将其封装成一个可重用的select函数,使其更接近Go语言的简洁性。

我们可以设计一个select生成器函数,它接受任意数量的Queue对象作为参数,并持续yield出接收到的消息及其来源。

import threading
import queue # 在Python 3中,Queue模块被重命名为queue

def select(*queues):
    """
    一个模拟Go语言select语句的Python生成器函数。
    它接受多个Queue对象,并持续yield出 (源队列, 消息) 元组。
    """
    combined_queue = queue.Queue(maxsize=0)

    def listen_and_forward(source_queue):
        while True:
            try:
                message = source_queue.get()
                combined_queue.put((source_queue, message))
            except Exception as e:
                # 实际应用中可能需要更复杂的错误处理或停止机制
                print(f"Error in listen_and_forward for {source_queue}: {e}")
                break

    # 为每个传入的队列启动一个守护转发线程
    for q in queues:
        t = threading.Thread(target=listen_and_forward, args=(q,))
        t.daemon = True
        t.start()

    # 主循环:持续从combined_queue中获取消息并yield
    while True:
        yield combined_queue.get()

def main_simulation_reusable():
    c1 = queue.Queue(maxsize=0)
    c2 = queue.Queue(maxsize=0)
    quit_channel = queue.Queue(maxsize=0)

    def producer_func1():
        for i in range(10):
            c1.put(i)
        quit_channel.put(0)

    threading.Thread(target=producer_func1).start()

    def producer_func2():
        for i in range(2):
            c2.put(i)

    threading.Thread(target=producer_func2).start()

    # 使用封装后的select函数
    for which_queue, msg in select(c1, c2, quit_channel):
        if which_queue is c1

相关专题

更多
python开发工具
python开发工具

php中文网为大家提供各种python开发工具,好的开发工具,可帮助开发者攻克编程学习中的基础障碍,理解每一行源代码在程序执行时在计算机中的过程。php中文网还为大家带来python相关课程以及相关文章等内容,供大家免费下载使用。

769

2023.06.15

python打包成可执行文件
python打包成可执行文件

本专题为大家带来python打包成可执行文件相关的文章,大家可以免费的下载体验。

661

2023.07.20

python能做什么
python能做什么

python能做的有:可用于开发基于控制台的应用程序、多媒体部分开发、用于开发基于Web的应用程序、使用python处理数据、系统编程等等。本专题为大家提供python相关的各种文章、以及下载和课程。

764

2023.07.25

format在python中的用法
format在python中的用法

Python中的format是一种字符串格式化方法,用于将变量或值插入到字符串中的占位符位置。通过format方法,我们可以动态地构建字符串,使其包含不同值。php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

639

2023.07.31

python教程
python教程

Python已成为一门网红语言,即使是在非编程开发者当中,也掀起了一股学习的热潮。本专题为大家带来python教程的相关文章,大家可以免费体验学习。

1305

2023.08.03

python环境变量的配置
python环境变量的配置

Python是一种流行的编程语言,被广泛用于软件开发、数据分析和科学计算等领域。在安装Python之后,我们需要配置环境变量,以便在任何位置都能够访问Python的可执行文件。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

549

2023.08.04

python eval
python eval

eval函数是Python中一个非常强大的函数,它可以将字符串作为Python代码进行执行,实现动态编程的效果。然而,由于其潜在的安全风险和性能问题,需要谨慎使用。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

579

2023.08.04

scratch和python区别
scratch和python区别

scratch和python的区别:1、scratch是一种专为初学者设计的图形化编程语言,python是一种文本编程语言;2、scratch使用的是基于积木的编程语法,python采用更加传统的文本编程语法等等。本专题为大家提供scratch和python相关的文章、下载、课程内容,供大家免费下载体验。

709

2023.08.11

Java JVM 原理与性能调优实战
Java JVM 原理与性能调优实战

本专题系统讲解 Java 虚拟机(JVM)的核心工作原理与性能调优方法,包括 JVM 内存结构、对象创建与回收流程、垃圾回收器(Serial、CMS、G1、ZGC)对比分析、常见内存泄漏与性能瓶颈排查,以及 JVM 参数调优与监控工具(jstat、jmap、jvisualvm)的实战使用。通过真实案例,帮助学习者掌握 Java 应用在生产环境中的性能分析与优化能力。

19

2026.01.20

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
最新Python教程 从入门到精通
最新Python教程 从入门到精通

共4课时 | 8.2万人学习

Django 教程
Django 教程

共28课时 | 3.3万人学习

SciPy 教程
SciPy 教程

共10课时 | 1.2万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号