0

0

如何使用Golang实现网络并发请求_多协程发送HTTP请求

P粉602998670

P粉602998670

发布时间:2026-01-07 12:34:03

|

781人浏览过

|

来源于php中文网

原创

Go 并发 HTTP 请求需用 goroutine + channel 控制并发量,避免资源耗尽;通过带缓冲 channel(如 sem := make(chan struct{}, 10))实现轻量限流,每个 goroutine 启动前先写入 sem 获取令牌。

如何使用golang实现网络并发请求_多协程发送http请求

用 Go 实现并发 HTTP 请求,核心是利用 goroutine + channel 控制并发量、收集结果、避免资源耗尽。不加限制地起成百上千 goroutine 发请求,容易触发连接拒绝、DNS 超时或被服务端限流。

控制并发数:用带缓冲 channel 做信号量

这是最轻量、Go 风格的限流方式——把 channel 当作“令牌桶”:

  • 创建容量为 N 的空 channel(如 sem := make(chan struct{}, 10)),代表最多同时运行 10 个请求
  • 每个 goroutine 启动前先写入一个空结构体 sem ,若已满则阻塞
  • 请求结束后从 channel 读出一个值 ,释放槽位

发起请求并收集结果:goroutine + channel 返回结构体

不要在 goroutine 内直接打印或写日志,而是统一返回结构体,由主 goroutine 收集:

  • 定义结果类型:type Result struct { URL string; Status int; Err error; BodyLen int }
  • 启动 goroutine 时传入 URL 和结果 channel:go doRequest(url, results, sem)
  • 函数内部执行 http.Get,无论成功失败都发结果到 results channel

超时与错误处理:用 context.WithTimeout 包裹请求

单个请求卡住会拖慢整个并发流程,必须设超时:

Cursor Directory
Cursor Directory

专为Cursor设计的开源资源库、提示词库

下载

立即学习go语言免费学习笔记(深入)”;

  • doRequest 中创建带超时的 context:ctx, cancel := context.WithTimeout(context.Background(), 5*time.Second)
  • http.DefaultClient.Do(req.WithContext(ctx)) 发送请求
  • 务必调用 cancel() 防止 context 泄漏(即使出错也要 defer cancel)
  • 注意:http.Get 不支持 context,必须用 client.Do + 手动构建 request

完整可运行示例(含并发控制、超时、结果汇总)

以下代码发 20 个请求,最大并发 5,每请求 3 秒超时,最后打印成功/失败统计:

(实际使用请替换为真实 URL 列表)
func main() {
    urls := []string{"https://httpbin.org/delay/1", "https://httpbin.org/status/404", /* ... */}
sem := make(chan struct{}, 5)
results := make(chan Result, len(urls))

for _, url := range urls {
    go func(u string) {
        sem <- struct{}{} // 获取令牌
        defer func() { <-sem }() // 释放令牌

        ctx, cancel := context.WithTimeout(context.Background(), 3*time.Second)
        defer cancel()

        req, _ := http.NewRequestWithContext(ctx, "GET", u, nil)
        resp, err := http.DefaultClient.Do(req)
        if err != nil {
            results <- Result{URL: u, Err: err}
            return
        }
        defer resp.Body.Close()

        results <- Result{URL: u, Status: resp.StatusCode, BodyLen: len(io.ReadAll(resp.Body))}
    }(url)
}

// 收集所有结果
for i := 0; i < len(urls); i++ {
    r := <-results
    if r.Err != nil {
        fmt.Printf("❌ %s → %v\n", r.URL, r.Err)
    } else {
        fmt.Printf("✅ %s → %d (%d bytes)\n", r.URL, r.Status, r.BodyLen)
    }
}

}

相关专题

更多
golang如何定义变量
golang如何定义变量

golang定义变量的方法:1、声明变量并赋予初始值“var age int =值”;2、声明变量但不赋初始值“var age int”;3、使用短变量声明“age :=值”等等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

177

2024.02.23

golang有哪些数据转换方法
golang有哪些数据转换方法

golang数据转换方法:1、类型转换操作符;2、类型断言;3、字符串和数字之间的转换;4、JSON序列化和反序列化;5、使用标准库进行数据转换;6、使用第三方库进行数据转换;7、自定义数据转换函数。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

226

2024.02.23

golang常用库有哪些
golang常用库有哪些

golang常用库有:1、标准库;2、字符串处理库;3、网络库;4、加密库;5、压缩库;6、xml和json解析库;7、日期和时间库;8、数据库操作库;9、文件操作库;10、图像处理库。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

336

2024.02.23

golang和python的区别是什么
golang和python的区别是什么

golang和python的区别是:1、golang是一种编译型语言,而python是一种解释型语言;2、golang天生支持并发编程,而python对并发与并行的支持相对较弱等等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

208

2024.03.05

golang是免费的吗
golang是免费的吗

golang是免费的。golang是google开发的一种静态强类型、编译型、并发型,并具有垃圾回收功能的开源编程语言,采用bsd开源协议。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

388

2024.05.21

golang结构体相关大全
golang结构体相关大全

本专题整合了golang结构体相关大全,想了解更多内容,请阅读专题下面的文章。

194

2025.06.09

golang相关判断方法
golang相关判断方法

本专题整合了golang相关判断方法,想了解更详细的相关内容,请阅读下面的文章。

189

2025.06.10

golang数组使用方法
golang数组使用方法

本专题整合了golang数组用法,想了解更多的相关内容,请阅读专题下面的文章。

191

2025.06.17

C++ 高性能计算与并行编程
C++ 高性能计算与并行编程

本专题专注于 C++ 在高性能计算(HPC)与并行编程中的应用,涵盖多线程、并发数据处理、OpenMP、MPI、GPU加速等技术。通过实际案例,帮助开发者掌握 如何利用 C++ 进行大规模数据计算和并行处理,提高程序的执行效率,适应高性能计算与数据密集型应用场景。

5

2026.01.08

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Go 教程
Go 教程

共32课时 | 3.5万人学习

Go语言实战之 GraphQL
Go语言实战之 GraphQL

共10课时 | 0.8万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号