0

0

如何优化大事务处理_mysql并发事务拆分

P粉602998670

P粉602998670

发布时间:2026-01-13 08:37:38

|

905人浏览过

|

来源于php中文网

原创

大事务拆分是提升MySQL并发性能与稳定性的关键,需按业务语义分批处理、游标分页、临时表+异步补偿,并注意连接与事务配置。

如何优化大事务处理_mysql并发事务拆分

大事务在 MySQL 中容易引发锁等待、主从延迟、内存占用过高甚至 OOM,拆分事务是提升并发性能和稳定性的关键手段。核心思路是:把一个长时间持有锁、扫描大量数据、写入多行的“巨无霸事务”,拆成多个小而快的事务,中间通过业务逻辑或状态控制保证一致性。

识别并定位大事务

先确认哪些事务真正属于“大事务”。不只是执行时间长,关键是:锁住的行数多、扫描的行数多、生成的 binlog 大、事务内包含大量 INSERT/UPDATE/DELETE

  • 查活跃长事务:SELECT * FROM information_schema.INNODB_TRX WHERE TIME_TO_SEC(TIMEDIFF(NOW(), TRX_STARTED)) > 60;
  • 看事务扫描量:SHOW ENGINE INNODB STATUS\G 中关注 mysql tables in userows examined
  • 结合慢日志(log_slow_admin_statements=ON)过滤带有 COMMIT 的慢查询,常暴露提交阶段卡顿的大事务

按业务语义合理拆分

不能为拆而拆,必须保障业务正确性。常见可拆分场景:

  • 批量导入/同步:10 万行数据插入,不要单个事务全包。按 500~5000 行分批,每批独立事务,失败只重试当前批次
  • 状态批量更新:如“将所有待处理订单更新为已发货”,可按 order_id 范围或时间分片(WHERE create_time BETWEEN ? AND ?),避免全表扫描+全表加锁
  • 复杂计算+落库:先在应用层完成聚合/校验,再用小事务写结果;避免在事务内做 RPC、文件读写、循环调用等耗时操作

用游标或分页替代全量加载

避免在事务中 SELECT ... FOR UPDATE 扫描几十万行。改用基于主键/自增 ID 的游标分页:

SEO GPT
SEO GPT

免费的白帽SEO,PPC和网站经销商平台

下载
  • 第一次:SELECT * FROM t WHERE id > 0 ORDER BY id LIMIT 1000 FOR UPDATE
  • 记下本次最大 id(比如 12345),下次查询 WHERE id > 12345,继续取下一批
  • 配合应用层循环处理,每次事务只锁 1000 行,释放快、冲突少、主从复制压力小

善用临时表与最终一致性补偿

对无法强一致拆分的场景(如跨库/跨服务更新),可用“两阶段”思路:

  • 第一阶段:小事务写入本地 task_log 表(记录要做的动作 + 状态=‘pending’)
  • 第二阶段:异步任务(如定时 Job 或消息队列消费者)拉取 pending 任务,逐条执行并更新状态为 ‘done’ 或 ‘failed’
  • 关键点:task_log 表主键/唯一键防重,执行前先 SELECT ... FOR UPDATE + 状态校验,避免重复执行

不复杂但容易忽略:拆分后记得检查 autocommit 是否关闭、连接是否复用、是否有隐式事务(如 DDL 后自动 commit)。小事务不是银弹,需配合索引优化、读写分离和监控告警一起落地。

相关专题

更多
mysql修改数据表名
mysql修改数据表名

MySQL修改数据表:1、首先查看数据库中所有的表,代码为:‘SHOW TABLES;’;2、修改表名,代码为:‘ALTER TABLE 旧表名 RENAME [TO] 新表名;’。php中文网还提供MySQL的相关下载、相关课程等内容,供大家免费下载使用。

660

2023.06.20

MySQL创建存储过程
MySQL创建存储过程

存储程序可以分为存储过程和函数,MySQL中创建存储过程和函数使用的语句分别为CREATE PROCEDURE和CREATE FUNCTION。使用CALL语句调用存储过程智能用输出变量返回值。函数可以从语句外调用(通过引用函数名),也能返回标量值。存储过程也可以调用其他存储过程。php中文网还提供MySQL创建存储过程的相关下载、相关课程等内容,供大家免费下载使用。

245

2023.06.21

mongodb和mysql的区别
mongodb和mysql的区别

mongodb和mysql的区别:1、数据模型;2、查询语言;3、扩展性和性能;4、可靠性。本专题为大家提供mongodb和mysql的区别的相关的文章、下载、课程内容,供大家免费下载体验。

281

2023.07.18

mysql密码忘了怎么查看
mysql密码忘了怎么查看

MySQL是一个关系型数据库管理系统,由瑞典MySQL AB 公司开发,属于 Oracle 旗下产品。MySQL 是最流行的关系型数据库管理系统之一,在 WEB 应用方面,MySQL是最好的 RDBMS 应用软件之一。那么mysql密码忘了怎么办呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

514

2023.07.19

mysql创建数据库
mysql创建数据库

MySQL是一个关系型数据库管理系统,由瑞典MySQL AB 公司开发,属于 Oracle 旗下产品。MySQL 是最流行的关系型数据库管理系统之一,在 WEB 应用方面,MySQL是最好的 RDBMS 应用软件之一。那么mysql怎么创建数据库呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

253

2023.07.25

mysql默认事务隔离级别
mysql默认事务隔离级别

MySQL是一种广泛使用的关系型数据库管理系统,它支持事务处理。事务是一组数据库操作,它们作为一个逻辑单元被一起执行。为了保证事务的一致性和隔离性,MySQL提供了不同的事务隔离级别。php中文网给大家带来了相关的教程以及文章欢迎大家前来学习阅读。

386

2023.08.08

sqlserver和mysql区别
sqlserver和mysql区别

SQL Server和MySQL是两种广泛使用的关系型数据库管理系统。它们具有相似的功能和用途,但在某些方面存在一些显著的区别。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

528

2023.08.11

mysql忘记密码
mysql忘记密码

MySQL是一种关系型数据库管理系统,关系数据库将数据保存在不同的表中,而不是将所有数据放在一个大仓库内,这样就增加了速度并提高了灵活性。那么忘记mysql密码我们该怎么解决呢?php中文网给大家带来了相关的教程以及其他关于mysql的文章,欢迎大家前来学习阅读。

599

2023.08.14

Java 项目构建与依赖管理(Maven / Gradle)
Java 项目构建与依赖管理(Maven / Gradle)

本专题系统讲解 Java 项目构建与依赖管理的完整体系,重点覆盖 Maven 与 Gradle 的核心概念、项目生命周期、依赖冲突解决、多模块项目管理、构建加速与版本发布规范。通过真实项目结构示例,帮助学习者掌握 从零搭建、维护到发布 Java 工程的标准化流程,提升在实际团队开发中的工程能力与协作效率。

10

2026.01.12

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
MySQL 教程
MySQL 教程

共48课时 | 1.7万人学习

MySQL 初学入门(mosh老师)
MySQL 初学入门(mosh老师)

共3课时 | 0.3万人学习

简单聊聊mysql8与网络通信
简单聊聊mysql8与网络通信

共1课时 | 787人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号