0

0

如何在Golang中进行数据库查询性能测试_Golang sql查询Benchmark实践

P粉602998670

P粉602998670

发布时间:2026-01-08 16:54:09

|

473人浏览过

|

来源于php中文网

原创

必须在Benchmark外初始化*sql.DB并复用,禁止单次新建;设MaxOpen/IdleConns为1,预热连接,显式Scan优于反射解包,确保索引命中,验证执行计划,关闭rows避免内存泄漏和统计失真。

如何在golang中进行数据库查询性能测试_golang sql查询benchmark实践

testing.B 跑 SQL 查询基准测试,必须控制连接复用

直接在 BenchmarkXxx 函数里每次新建 *sql.DB 会严重污染结果——连接建立、认证、TLS 握手全被算进耗时。真实场景中 *sql.DB 是长生命周期对象,测试必须模拟这点。

  • BenchmarkXxx 外部初始化一次 *sql.DB,用全局变量或 testMain 管理生命周期
  • 调用 db.SetMaxOpenConns(1)db.SetMaxIdleConns(1) 避免连接池干扰单次查询测量
  • 每次循环前执行 db.Exec("SELECT 1") 确保连接已就绪(防首次查询的冷启动延迟)

Rows.Scan 方式影响显著,别默认用 struct 反射解包

sqlx.StructScanmap[string]interface{} 解析 100 行数据,比手动 rows.Scan(&id, &name, &age) 慢 3–5 倍。反射和类型检查在循环内反复发生,testing.B.N 越大,差距越明显。

  • 性能敏感场景,优先写显式 Scan,尤其字段数固定、类型明确时
  • 若必须用 struct,确保字段有 db tag 且类型严格匹配(int64BIGINTstringVARCHAR),避免运行时类型转换
  • 避免在 Benchmark 循环内 new struct 实例——提前分配好指针切片复用内存

WHERE 条件是否走索引,会彻底改变 db.Query 的 Benchmark 结果

同一张表、同样代码,WHERE id = ?(主键查询)和 WHERE created_at > ?(无索引时间范围)的 p99 耗时可能差两个数量级。Benchmark 不是测 Go 代码,是在测“SQL + 执行计划 + 数据库负载”的组合表现。

  • 测试前务必用 EXPLAIN 确认执行计划,把 type=ALL(全表扫描)换成 type=consttype=range
  • db.QueryRow("SELECT COUNT(*) FROM ...") 先确认测试数据量级(比如 100 行 vs 100 万行)
  • 避免在测试期间其他进程访问同库同表,MySQL 的 innodb_row_lock_waits 上升会直接拉高延迟

别忽略 rows.Close(),漏掉它会导致 Benchmark 内存持续增长

rows 是资源句柄,不显式 Close() 不仅可能触发连接泄漏,还会让 testing.B 的内存统计失真(GC 不及时回收底层 network buffer)。Go 1.22+ 的 rows 虽支持 defer,但在 Benchmark 循环里 defer 本身有开销。

立即学习go语言免费学习笔记(深入)”;

  • 统一写成 defer rows.Close() 放在 rows, err := db.Query(...) 后立即执行
  • 如果用 QueryRow,不用 Close,但要注意它内部仍可能持有连接,高并发下建议搭配 db.SetConnMaxLifetime
  • 运行 go test -bench=. -benchmem 时重点看 Benchmem 输出的 allocs/op —— 理想值应接近 0(仅 SQL 字符串和参数分配)
func BenchmarkUserSelectByID(b *testing.B) {
	db := setupTestDB() // 外部初始化,非 b.Helper()
	defer db.Close()

	b.ResetTimer()
	for i := 0; i < b.N; i++ {
		rows, err := db.Query("SELECT id, name, email FROM users WHERE id = $1", i%1000)
		if err != nil {
			b.Fatal(err)
		}
		defer rows.Close() // 必须放这里

		for rows.Next() {
			var id int
			var name, email string
			if err := rows.Scan(&id, &name, &email); err != nil {
				b.Fatal(err)
			}
			// 不做业务逻辑,避免干扰计时
		}
	}
}
实际压测时,数据库连接数、查询缓存开关、甚至 pg_stat_statements 是否启用,都会让数字漂移。与其追求绝对数值,不如固定环境后对比不同 Scan 方式或不同索引策略的相对变化。

相关文章

数码产品性能查询
数码产品性能查询

该软件包括了市面上所有手机CPU,手机跑分情况,电脑CPU,电脑产品信息等等,方便需要大家查阅数码产品最新情况,了解产品特性,能够进行对比选择最具性价比的商品。

下载

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
golang如何定义变量
golang如何定义变量

golang定义变量的方法:1、声明变量并赋予初始值“var age int =值”;2、声明变量但不赋初始值“var age int”;3、使用短变量声明“age :=值”等等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

177

2024.02.23

golang有哪些数据转换方法
golang有哪些数据转换方法

golang数据转换方法:1、类型转换操作符;2、类型断言;3、字符串和数字之间的转换;4、JSON序列化和反序列化;5、使用标准库进行数据转换;6、使用第三方库进行数据转换;7、自定义数据转换函数。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

226

2024.02.23

golang常用库有哪些
golang常用库有哪些

golang常用库有:1、标准库;2、字符串处理库;3、网络库;4、加密库;5、压缩库;6、xml和json解析库;7、日期和时间库;8、数据库操作库;9、文件操作库;10、图像处理库。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

336

2024.02.23

golang和python的区别是什么
golang和python的区别是什么

golang和python的区别是:1、golang是一种编译型语言,而python是一种解释型语言;2、golang天生支持并发编程,而python对并发与并行的支持相对较弱等等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

208

2024.03.05

golang是免费的吗
golang是免费的吗

golang是免费的。golang是google开发的一种静态强类型、编译型、并发型,并具有垃圾回收功能的开源编程语言,采用bsd开源协议。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

388

2024.05.21

golang结构体相关大全
golang结构体相关大全

本专题整合了golang结构体相关大全,想了解更多内容,请阅读专题下面的文章。

194

2025.06.09

golang相关判断方法
golang相关判断方法

本专题整合了golang相关判断方法,想了解更详细的相关内容,请阅读下面的文章。

189

2025.06.10

golang数组使用方法
golang数组使用方法

本专题整合了golang数组用法,想了解更多的相关内容,请阅读专题下面的文章。

191

2025.06.17

Golang 分布式缓存与高可用架构
Golang 分布式缓存与高可用架构

本专题系统讲解 Golang 在分布式缓存与高可用系统中的应用,涵盖缓存设计原理、Redis/Etcd集成、数据一致性与过期策略、分布式锁、缓存穿透/雪崩/击穿解决方案,以及高可用架构设计。通过实战案例,帮助开发者掌握 如何使用 Go 构建稳定、高性能的分布式缓存系统,提升大型系统的响应速度与可靠性。

58

2026.01.09

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
MySQL 教程
MySQL 教程

共48课时 | 1.7万人学习

MySQL 初学入门(mosh老师)
MySQL 初学入门(mosh老师)

共3课时 | 0.3万人学习

简单聊聊mysql8与网络通信
简单聊聊mysql8与网络通信

共1课时 | 785人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号