Linux 并发发送请求怎么实现？-linux运维-PHP中文网

Linux 并发发送请求怎么实现？

舞姬之光

发布： 2025-12-05 15:55:00

原创

505人浏览过

Linux并发请求核心是控制并发数、避免资源耗尽及处理超时错误；可用curl+xargs（简单批量）、Python多线程/asyncio（灵活定制）或Go/Rust（高性能长期运行），并需调优ulimit、somaxconn等系统参数。

linux 并发发送请求怎么实现？

Linux 下并发发送请求，核心是利用多进程、多线程或异步 I/O 机制，绕过单请求串行等待的瓶颈。关键不在于“怎么发”，而在于“怎么管”——控制并发数、避免资源耗尽、处理超时和错误。

用 curl + xargs 并发调用（简单脚本场景）

适合批量 HTTP 请求，如健康检查、批量通知。xargs 的 -P 参数可指定最大并行数，防止打爆目标或本地端口：

seq 1 100 | xargs -P 10 -I {} curl -s -o /dev/null -w "%{http_code}\n" "https://api.example.com/test?i={}"

登录后复制

-P 10 表示最多同时跑 10 个 curl 进程
-I {} 把每个数字代入 URL，实现参数化
加 -s 静默输出，用 -w 提取状态码，便于后续统计

用 Python 的 requests + threading 或 asyncio（灵活可控）

需要定制逻辑（如带 Token、重试、结果聚合）时更合适。同步多线程简单直接；异步（asyncio + aiohttp）吞吐更高，尤其 I/O 密集型：

# threading 示例（限制 20 线程）
from concurrent.futures import ThreadPoolExecutor
import requests
<p>def fetch(url): return requests.get(url, timeout=5).status_code</p>
                    <div class="aritcle_card">
                        <a class="aritcle_card_img" href="/xiazai/code/11174">
                            <img src="https://img.php.cn/upload/webcode/000/000/009/176520600832184.jpg" alt="天天团购系统">
                        </a>
                        <div class="aritcle_card_info">
                            <a href="/xiazai/code/11174">天天团购系统</a>
                            <p>天天团购系统是一套强大的开源团购程序，采用PHP+mysql开发，系统内置支付宝、财付通、GOOGLE地图等接口，支持短信发送团购券和实物团购快递发货等；另外可通过Ucenter模块，与网站已有系统无缝整合，实现用户同步注册、登陆、退出。 天天团购系统是一套创新的开源团购程序，拥有多达10项首创功能，同时支持虚拟和实物团购，内置类似淘宝的快递配送体系，并提供强大的抽奖、邀请返利等营销功能，让您轻松</p>
                            <div class="">
                                <img src="/static/images/card_xiazai.png" alt="天天团购系统">
                                <span>0</span>
                            </div>
                        </div>
                        <a href="/xiazai/code/11174" class="aritcle_card_btn">
                            <span>查看详情</span>
                            <img src="/static/images/cardxiayige-3.png" alt="天天团购系统">
                        </a>
                    </div>
                <p>urls = [f"<a href="https://www.php.cn/link/2bb054c14409adcb28cb8d922e10a383">https://www.php.cn/link/2bb054c14409adcb28cb8d922e10a383</a>}" for i in range(100)]
with ThreadPoolExecutor(max_workers=20) as ex:
results = list(ex.map(fetch, urls))

登录后复制

线程数不宜超过 50，太多反而因 GIL 和上下文切换拖慢
异步方案推荐 aiohttp，单进程轻松支撑数百并发连接
务必设 timeout，否则一个卡住的请求会拖垮整个池

用 Go 或 Rust 写轻量客户端（高性能/长期运行）

如果并发量大（如每秒上千请求）、要求低延迟或需嵌入其他服务，用 Go 更省心：

go func() {
    for _, u := range urls {
        go func(url string) {
            resp, _ := http.Get(url)
            defer resp.Body.Close()
            // 处理 resp...
        }(u)
    }
}()

登录后复制