0

0

mysql如何实现支付流水记录_mysql高并发插入优化

P粉602998670

P粉602998670

发布时间:2026-03-11 11:20:03

|

403人浏览过

|

来源于php中文网

原创

高并发下 insert into payment_log 卡住主因是 repeatable read 隔离级别下 innodb 对插入间隙加锁,导致自增主键末尾锁竞争;推荐用 insert ignore + 唯一索引 out_trade_no、每批 ≤50 行、innodb_autoinc_lock_mode=2、innodb_flush_log_at_trx_commit=2(需业务确认容灾)。

mysql如何实现支付流水记录_mysql高并发插入优化

为什么直接 INSERT INTO payment_log 在高并发下会卡住

因为默认事务隔离级别(REPEATABLE READ)下,InnoDB 对插入间隙加锁,大量并发 INSERT 会争抢同一索引间隙(尤其是自增主键末尾),导致锁等待甚至超时。常见现象是应用层报 Lock wait timeout exceeded,或响应时间从几毫秒飙到秒级。

这不是磁盘 I/O 瓶颈,而是锁竞争。哪怕表只有几十万行,只要写入集中在最新分区(比如按天分表但没拆分),问题一样明显。

  • 避免用 SELECT ... FOR UPDATEUPDATE 预占记录再插入——这反而加重锁冲突
  • 确认 innodb_autoinc_lock_mode 设为 2(交错模式),MySQL 5.6+ 默认已是,但老实例可能仍是 1
  • 不要在插入前查最大 ID 再手动拼 id——破坏自增机制,且引入新锁点

INSERT IGNORE 还是 ON DUPLICATE KEY UPDATE

二者都依赖唯一索引去重,但行为差异直接影响幂等性和性能。支付流水必须防重复,但不能因去重逻辑拖慢主路径。

INSERT IGNORE 在遇到唯一键冲突时静默跳过,不报错;ON DUPLICATE KEY UPDATE 则会执行更新语句(哪怕只是 updated_at = NOW())。后者多一次行查找 + 更新操作,在高并发下容易引发 secondary index 锁升级,尤其当唯一约束建在业务字段(如 out_trade_no)而非主键上时。

  • 推荐用 INSERT IGNORE,只保证“不重复插入”,失败由上游重试或异步补偿处理
  • 唯一索引必须建在 out_trade_no 上,且类型要匹配(VARCHAR(64) 就别用 TEXT
  • 如果业务强要求记录“最后一次尝试时间”,改用 INSERT ... SELECT + 临时表兜底,避开 ON DUPLICATE 的锁开销

批量插入时,INSERT ... VALUES (...), (...), (...) 的安全上限是多少

没有固定数字,取决于单行数据大小、网络包限制(max_allowed_packet)、以及事务日志压力。实测中,超过 500 行/批常触发 Packets larger than max_allowed_packet,而超过 100 行/批在 1000 QPS 下就可能推高 InnoDB row lock time

皮卡智能
皮卡智能

AI驱动高效视觉设计平台

下载

更关键的是:大批次插入会延长事务持有时间,阻塞其他写操作。支付流水这种低延迟敏感场景,宁可多发几次小批,也不要压成一个“巨批”。

  • 控制每批 ≤ 50 行,GROUP_CONCAT_MAX_LENmax_allowed_packet 至少设为 32M
  • LOAD DATA INFILE 替代大批量 INSERT?不行——它需要文件权限,且无法做唯一键冲突处理,线上支付系统基本不用
  • 如果用 ORM(如 MyBatis),关掉 useGeneratedKeys,避免额外 SELECT LAST_INSERT_ID() 查询

要不要分表?payment_log_202409 这种按月分表真有用吗

有用,但只解决查询老化数据的性能,对写入吞吐提升微乎其微。InnoDB 的插入瓶颈在缓冲池和 redo log 刷盘,跟表数量无关。反倒是分表后,跨月统计类 SQL 变成 UNION ALL,运维成本陡增。

真正缓解写压的是:冷热分离 + 异步落库。把实时记账(核心账户余额变更)和流水归档(明细日志)拆成两个流程,后者走消息队列异步写入。

  • 当前月表仍用单表,但加 shard_key 字段(如 MOD(user_id, 16)),后续水平拆分有平滑路径
  • 禁止用 CREATE TABLE LIKE 复制表结构——容易漏掉 ROW_FORMAT=COMPRESSEDKEY_BLOCK_SIZE,导致新表空间暴涨
  • 如果已用分表,确保所有分表的 auto_increment_offsetauto_increment_increment 错开,避免主键冲突

最易被忽略的一点:没关 innodb_flush_log_at_trx_commit=1 就谈优化,等于在泥地踩油门。生产环境若能接受秒级数据丢失,把它调成 2,写入吞吐常能翻倍——但这得和业务方明确约定容灾边界。

热门AI工具

更多
DeepSeek
DeepSeek

幻方量化公司旗下的开源大模型平台

豆包大模型
豆包大模型

字节跳动自主研发的一系列大型语言模型

通义千问
通义千问

阿里巴巴推出的全能AI助手

腾讯元宝
腾讯元宝

腾讯混元平台推出的AI助手

文心一言
文心一言

文心一言是百度开发的AI聊天机器人,通过对话可以生成各种形式的内容。

讯飞写作
讯飞写作

基于讯飞星火大模型的AI写作工具,可以快速生成新闻稿件、品宣文案、工作总结、心得体会等各种文文稿

即梦AI
即梦AI

一站式AI创作平台,免费AI图片和视频生成。

ChatGPT
ChatGPT

最最强大的AI聊天机器人程序,ChatGPT不单是聊天机器人,还能进行撰写邮件、视频脚本、文案、翻译、代码等任务。

相关专题

更多
数据分析工具有哪些
数据分析工具有哪些

数据分析工具有Excel、SQL、Python、R、Tableau、Power BI、SAS、SPSS和MATLAB等。详细介绍:1、Excel,具有强大的计算和数据处理功能;2、SQL,可以进行数据查询、过滤、排序、聚合等操作;3、Python,拥有丰富的数据分析库;4、R,拥有丰富的统计分析库和图形库;5、Tableau,提供了直观易用的用户界面等等。

1133

2023.10.12

SQL中distinct的用法
SQL中distinct的用法

SQL中distinct的语法是“SELECT DISTINCT column1, column2,...,FROM table_name;”。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

340

2023.10.27

SQL中months_between使用方法
SQL中months_between使用方法

在SQL中,MONTHS_BETWEEN 是一个常见的函数,用于计算两个日期之间的月份差。想了解更多SQL的相关内容,可以阅读本专题下面的文章。

381

2024.02.23

SQL出现5120错误解决方法
SQL出现5120错误解决方法

SQL Server错误5120是由于没有足够的权限来访问或操作指定的数据库或文件引起的。想了解更多sql错误的相关内容,可以阅读本专题下面的文章。

2152

2024.03.06

sql procedure语法错误解决方法
sql procedure语法错误解决方法

sql procedure语法错误解决办法:1、仔细检查错误消息;2、检查语法规则;3、检查括号和引号;4、检查变量和参数;5、检查关键字和函数;6、逐步调试;7、参考文档和示例。想了解更多语法错误的相关内容,可以阅读本专题下面的文章。

380

2024.03.06

oracle数据库运行sql方法
oracle数据库运行sql方法

运行sql步骤包括:打开sql plus工具并连接到数据库。在提示符下输入sql语句。按enter键运行该语句。查看结果,错误消息或退出sql plus。想了解更多oracle数据库的相关内容,可以阅读本专题下面的文章。

1663

2024.04.07

sql中where的含义
sql中where的含义

sql中where子句用于从表中过滤数据,它基于指定条件选择特定的行。想了解更多where的相关内容,可以阅读本专题下面的文章。

585

2024.04.29

sql中删除表的语句是什么
sql中删除表的语句是什么

sql中用于删除表的语句是drop table。语法为drop table table_name;该语句将永久删除指定表的表和数据。想了解更多sql的相关内容,可以阅读本专题下面的文章。

440

2024.04.29

C# ASP.NET Core微服务架构与API网关实践
C# ASP.NET Core微服务架构与API网关实践

本专题围绕 C# 在现代后端架构中的微服务实践展开,系统讲解基于 ASP.NET Core 构建可扩展服务体系的核心方法。内容涵盖服务拆分策略、RESTful API 设计、服务间通信、API 网关统一入口管理以及服务治理机制。通过真实项目案例,帮助开发者掌握构建高可用微服务系统的关键技术,提高系统的可扩展性与维护效率。

3

2026.03.11

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
MySQL 教程
MySQL 教程

共48课时 | 2.5万人学习

MySQL 初学入门(mosh老师)
MySQL 初学入门(mosh老师)

共3课时 | 0.3万人学习

简单聊聊mysql8与网络通信
简单聊聊mysql8与网络通信

共1课时 | 846人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号