0

0

Go如何限制HTTP并发请求数_Go网络并发控制方法

P粉602998670

P粉602998670

发布时间:2026-01-14 12:31:02

|

349人浏览过

|

来源于php中文网

原创

最直接有效的方式是用带缓冲的 chan struct{} 模拟信号量,容量即最大并发数,每次请求前写入占位、结束后读出释放,硬性限制同时运行的 goroutine 数量。

go如何限制http并发请求数_go网络并发控制方法

Go 限制 HTTP 并发请求数,最直接有效的方式是用带缓冲的 chan struct{} 模拟信号量,它轻量、无依赖、线程安全,且能硬性卡住同时运行的 goroutine 数量——不是“尽量控制”,而是“绝不超限”。

chan struct{} 实现并发数硬限制

这是控制并发最常用也最可控的手法。本质是把 channel 当作“许可池”:容量即最大并发数,每次请求前写入一个空结构体占位,结束后读出释放。它不关心请求耗时长短,只保证同一时刻最多 N 个请求在跑。

  • 适合场景:批量调用第三方 API、爬虫、数据同步等易触发连接耗尽或目标服务限流的场景
  • 错误现象:不加限制时,go client.Get(url) 起几千 goroutine,很快出现 dial tcp: lookup xxx: no such hosttoo many open files
  • 参数差异:make(chan struct{}, 10) 表示最多 10 并发;设为 1 就退化成串行,设太大则失去控制意义
  • 必须配 defer func() { ,否则 panic 或提前 return 会导致许可永久丢失,channel 慢慢被占满,后续所有请求阻塞
var sem = make(chan struct{}, 20) // 最大并发20

func fetchURL(url string) error { sem <- struct{}{} // 阻塞等待许可 defer func() { <-sem }() // 一定要放 defer,确保释放

resp, err := client.Get(url)
if err != nil {
    return err
}
defer resp.Body.Close()
return nil

}

为什么不用 WaitGroup 单独控并发?

sync.WaitGroup 只负责“等全部完成”,它不阻止你起 1000 个 goroutine —— 这正是问题源头。它和并发控制无关,只是收尾工具。

小鸽子助手
小鸽子助手

一款集成于WPS/Word的智能写作插件

下载
  • 常见误用:先 wg.Add(1000),再起 1000 个 goroutine,结果瞬间打满本地资源
  • 正确配合方式:WaitGroup 必须和信号量(或 worker 池)一起用:先用 channel 控制“谁可以开干”,再用 wg.Done() 记录“谁干完了”
  • 性能影响:纯 WaitGroup 零开销,但放任 goroutine 泛滥会引发调度器压力、内存暴涨、文件描述符耗尽

令牌桶 rate.Limiter 和信号量的区别与组合用法

rate.NewLimiter(10, 5) 控的是“每秒多少请求”,是速率维度;chan struct{} 控的是“同一时刻几个请求”,是数量维度。两者解决不同问题,常需共存。

  • 单独用限流器不行:即使每秒只发 10 个请求,若每个请求耗时 5 秒,第 1 秒就起 10 个 goroutine,第 2 秒又起 10 个……瞬间堆积 50 个活跃请求
  • 单独用信号量也不够:允许 20 并发,但若 20 个请求在 100ms 内全发出,下游服务可能因瞬时 QPS 过高而 429
  • 推荐组合:先过信号量拿执行权,再用 limiter.Wait(ctx) 等令牌——既防本地资源崩,也防压垮对方

真正容易被忽略的不是“怎么写”,而是“怎么清理”:长期运行的服务里,如果按 IP 或用户建了大量 rate.Limiter 实例却从不回收,map 会无限膨胀;而信号量 channel 虽简单,但一旦某次 defer 因 panic 未执行,那个 slot 就永远卡死。稳定性不在代码多炫,而在每一处释放是否牢靠。

相关专题

更多
golang结构体相关大全
golang结构体相关大全

本专题整合了golang结构体相关大全,想了解更多内容,请阅读专题下面的文章。

195

2025.06.09

golang结构体方法
golang结构体方法

本专题整合了golang结构体相关内容,请阅读专题下面的文章了解更多。

187

2025.07.04

线程和进程的区别
线程和进程的区别

线程和进程的区别:线程是进程的一部分,用于实现并发和并行操作,而线程共享进程的资源,通信更方便快捷,切换开销较小。本专题为大家提供线程和进程区别相关的各种文章、以及下载和课程。

480

2023.08.10

Golang channel原理
Golang channel原理

本专题整合了Golang channel通信相关介绍,阅读专题下面的文章了解更多详细内容。

244

2025.11.14

golang channel相关教程
golang channel相关教程

本专题整合了golang处理channel相关教程,阅读专题下面的文章了解更多详细内容。

342

2025.11.17

http500解决方法
http500解决方法

http500解决方法有检查服务器日志、检查代码错误、检查服务器配置、检查文件和目录权限、检查资源不足、更新软件版本、重启服务器或寻求专业帮助等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

331

2023.11.09

http请求415错误怎么解决
http请求415错误怎么解决

解决方法:1、检查请求头中的Content-Type;2、检查请求体中的数据格式;3、使用适当的编码格式;4、使用适当的请求方法;5、检查服务器端的支持情况。更多http请求415错误怎么解决的相关内容,可以阅读下面的文章。

405

2023.11.14

HTTP 503错误解决方法
HTTP 503错误解决方法

HTTP 503错误表示服务器暂时无法处理请求。想了解更多http错误代码的相关内容,可以阅读本专题下面的文章。

1686

2024.03.12

Java 桌面应用开发(JavaFX 实战)
Java 桌面应用开发(JavaFX 实战)

本专题系统讲解 Java 在桌面应用开发领域的实战应用,重点围绕 JavaFX 框架,涵盖界面布局、控件使用、事件处理、FXML、样式美化(CSS)、多线程与UI响应优化,以及桌面应用的打包与发布。通过完整示例项目,帮助学习者掌握 使用 Java 构建现代化、跨平台桌面应用程序的核心能力。

2

2026.01.14

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Go 教程
Go 教程

共32课时 | 3.7万人学习

Go语言实战之 GraphQL
Go语言实战之 GraphQL

共10课时 | 0.8万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号