Linux 并发发送请求怎么实现？-linux运维-PHP中文网

Linux 并发发送请求怎么实现？

舞姬之光

发布： 2025-12-05 15:55:00

原创

472人浏览过

Linux并发请求核心是控制并发数、避免资源耗尽及处理超时错误；可用curl+xargs（简单批量）、Python多线程/asyncio（灵活定制）或Go/Rust（高性能长期运行），并需调优ulimit、somaxconn等系统参数。

linux 并发发送请求怎么实现？

Linux 下并发发送请求，核心是利用多进程、多线程或异步 I/O 机制，绕过单请求串行等待的瓶颈。关键不在于“怎么发”，而在于“怎么管”——控制并发数、避免资源耗尽、处理超时和错误。

用 curl + xargs 并发调用（简单脚本场景）

适合批量 HTTP 请求，如健康检查、批量通知。xargs 的 -P 参数可指定最大并行数，防止打爆目标或本地端口：

seq 1 100 | xargs -P 10 -I {} curl -s -o /dev/null -w "%{http_code}\n" "https://api.example.com/test?i={}"

登录后复制

-P 10 表示最多同时跑 10 个 curl 进程
-I {} 把每个数字代入 URL，实现参数化
加 -s 静默输出，用 -w 提取状态码，便于后续统计

用 Python 的 requests + threading 或 asyncio（灵活可控）

需要定制逻辑（如带 Token、重试、结果聚合）时更合适。同步多线程简单直接；异步（asyncio + aiohttp）吞吐更高，尤其 I/O 密集型：

# threading 示例（限制 20 线程）
from concurrent.futures import ThreadPoolExecutor
import requests
<p>def fetch(url): return requests.get(url, timeout=5).status_code</p>
                    <div class="aritcle_card">
                        <a class="aritcle_card_img" href="/xiazai/gongju/1570">
                            <img src="https://img.php.cn/upload/manual/000/000/017/169233859552299.png" alt="TeemIp - IPAM and DDI solution">
                        </a>
                        <div class="aritcle_card_info">
                            <a href="/xiazai/gongju/1570">TeemIp - IPAM and DDI solution</a>
                            <p>TeemIp是一个免费、开源、基于WEB的IP地址管理（IPAM）工具，提供全面的IP管理功能。它允许您管理IPv4、IPv6和DNS空间：跟踪用户请求，发现和分配IP，管理您的IP计划、子网空间、区域和DNS记录，符合最佳的DDI实践。同时，TeemIp的配置管理数据库（CMDB）允许您管理您的IT库存并将您的配置项（CIs）与它们使用的IP关联起来。项目源代码位于https://github.com/TeemIP</p>
                            <div class="">
                                <img src="/static/images/card_xiazai.png" alt="TeemIp - IPAM and DDI solution">
                                <span>10</span>
                            </div>
                        </div>
                        <a href="/xiazai/gongju/1570" class="aritcle_card_btn">
                            <span>查看详情</span>
                            <img src="/static/images/cardxiayige-3.png" alt="TeemIp - IPAM and DDI solution">
                        </a>
                    </div>
                <p>urls = [f"<a href="https://www.php.cn/link/2bb054c14409adcb28cb8d922e10a383">https://www.php.cn/link/2bb054c14409adcb28cb8d922e10a383</a>}" for i in range(100)]
with ThreadPoolExecutor(max_workers=20) as ex:
results = list(ex.map(fetch, urls))

登录后复制

线程数不宜超过 50，太多反而因 GIL 和上下文切换拖慢
异步方案推荐 aiohttp，单进程轻松支撑数百并发连接
务必设 timeout，否则一个卡住的请求会拖垮整个池

用 Go 或 Rust 写轻量客户端（高性能/长期运行）

如果并发量大（如每秒上千请求）、要求低延迟或需嵌入其他服务，用 Go 更省心：

go func() {
    for _, u := range urls {
        go func(url string) {
            resp, _ := http.Get(url)
            defer resp.Body.Close()
            // 处理 resp...
        }(u)
    }
}()

登录后复制