0

0

SQL 深度分页的优化方案

舞夢輝影

舞夢輝影

发布时间:2026-01-19 19:31:47

|

958人浏览过

|

来源于php中文网

原创

深度分页性能差本质是需扫描跳过大量数据,优化核心是避免OFFSET全量扫描,推荐游标分页(基于主键/时间戳)、覆盖索引+子查询、分表归档、分页缓存等方案。

sql 深度分页的优化方案

深度分页(比如 OFFSET 1000000 LIMIT 20)在 MySQL、PostgreSQL 等主流数据库中性能急剧下降,本质是数据库仍需扫描并跳过前 100 万行。优化核心思路是:避免 OFFSET 的全量扫描,改用基于有序字段的“游标分页”或覆盖索引+子查询等更高效方式。

用主键/唯一有序字段做游标分页(推荐)

适用于数据按主键或时间戳等单调递增字段排序、且前端支持“上一页/下一页”而非跳转任意页的场景。例如按 id 升序分页:

  • 第一页查:SELECT * FROM orders ORDER BY id LIMIT 20,记下最后一条的 id = 12345
  • 下一页查:SELECT * FROM orders WHERE id > 12345 ORDER BY id LIMIT 20
  • 优势:不依赖 OFFSET,走索引范围扫描,响应稳定在毫秒级
  • 注意:不能直接跳转第 1000 页;若需跳转,可先用 SELECT id FROM orders ORDER BY id LIMIT 1 OFFSET 999999 获取锚点 ID(仍慢),再用游标查,但仅限低频操作

利用覆盖索引 + 子查询减少回表(MySQL 常用)

当必须用 OFFSET 时,先通过覆盖索引快速定位主键,再关联原表取完整数据:

WebShop开源网上购物系统
WebShop开源网上购物系统

WebShop网上商店系统专注中小企业、个人的网上购物电子商务解决方案,淘宝商城系统用户/个人首选开店的购物系统!综合5500多用户的意见或建议,从功能上,界面美观上,安全性,易用性上等对网店系统进行了深度的优化,功能更加强大,界面模板可直接后台选择。WebShop网上商店系统特点:1 对于中小企业、个体、个人、店主和淘宝易趣等卖家,可利用WebShop快速建立购物网。2 源代码开放,利用WebS

下载
  • 假设查询 SELECT id, name, created_at FROM users ORDER BY created_at LIMIT 20 OFFSET 100000
  • 优化写法:SELECT u.* FROM users u INNER JOIN (SELECT id FROM users ORDER BY created_at LIMIT 20 OFFSET 100000) t ON u.id = t.id
  • 原理:子查询只查索引字段(如 created_at + id 组合索引),体积小、扫描快;外层 JOIN 避免大量回表
  • 前提:必须有 (created_at, id) 这类联合索引,且 id 在索引末尾(保证排序稳定性)

物理分表或归档冷数据

对历史数据占比高、访问集中在近期的业务(如订单、日志),深度分页慢往往是因为单表过大:

  • 按时间归档:将 6 个月前订单移入 orders_archive 表,主表保持百万级规模
  • 按 ID 分表:如 users_001 ~ users_100,配合路由规则,让单表数据量可控
  • 效果:即使保留 OFFSET,因单表变小,100 万 offset 的耗时可能从 5 秒降至 200ms
  • 注意:需配套修改应用层分页逻辑,避免跨分片排序分页

缓存分页结果(适合读多写少场景)

对固定条件(如“按销量排行 TOP 10000”)的深度分页,可预计算并缓存结果:

  • 后台定时任务生成分页快照:SELECT id FROM products ORDER BY sales DESC,按每页 20 条切分成 Redis 中的 zset 或 hash
  • 用户请求第 50000 页时,直接查 ZRANGE products_top_sales 999980 999999 拿 ID 列表,再批量查详情
  • 适用:排行榜、热门列表等业务;不适用实时性要求高或排序字段频繁变更的场景

相关专题

更多
数据分析工具有哪些
数据分析工具有哪些

数据分析工具有Excel、SQL、Python、R、Tableau、Power BI、SAS、SPSS和MATLAB等。详细介绍:1、Excel,具有强大的计算和数据处理功能;2、SQL,可以进行数据查询、过滤、排序、聚合等操作;3、Python,拥有丰富的数据分析库;4、R,拥有丰富的统计分析库和图形库;5、Tableau,提供了直观易用的用户界面等等。

683

2023.10.12

SQL中distinct的用法
SQL中distinct的用法

SQL中distinct的语法是“SELECT DISTINCT column1, column2,...,FROM table_name;”。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

320

2023.10.27

SQL中months_between使用方法
SQL中months_between使用方法

在SQL中,MONTHS_BETWEEN 是一个常见的函数,用于计算两个日期之间的月份差。想了解更多SQL的相关内容,可以阅读本专题下面的文章。

347

2024.02.23

SQL出现5120错误解决方法
SQL出现5120错误解决方法

SQL Server错误5120是由于没有足够的权限来访问或操作指定的数据库或文件引起的。想了解更多sql错误的相关内容,可以阅读本专题下面的文章。

1095

2024.03.06

sql procedure语法错误解决方法
sql procedure语法错误解决方法

sql procedure语法错误解决办法:1、仔细检查错误消息;2、检查语法规则;3、检查括号和引号;4、检查变量和参数;5、检查关键字和函数;6、逐步调试;7、参考文档和示例。想了解更多语法错误的相关内容,可以阅读本专题下面的文章。

357

2024.03.06

oracle数据库运行sql方法
oracle数据库运行sql方法

运行sql步骤包括:打开sql plus工具并连接到数据库。在提示符下输入sql语句。按enter键运行该语句。查看结果,错误消息或退出sql plus。想了解更多oracle数据库的相关内容,可以阅读本专题下面的文章。

676

2024.04.07

sql中where的含义
sql中where的含义

sql中where子句用于从表中过滤数据,它基于指定条件选择特定的行。想了解更多where的相关内容,可以阅读本专题下面的文章。

575

2024.04.29

sql中删除表的语句是什么
sql中删除表的语句是什么

sql中用于删除表的语句是drop table。语法为drop table table_name;该语句将永久删除指定表的表和数据。想了解更多sql的相关内容,可以阅读本专题下面的文章。

417

2024.04.29

xml格式相关教程
xml格式相关教程

本专题整合了xml格式相关教程汇总,阅读专题下面的文章了解更多详细内容。

0

2026.01.19

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
MySQL 教程
MySQL 教程

共48课时 | 1.8万人学习

MySQL 初学入门(mosh老师)
MySQL 初学入门(mosh老师)

共3课时 | 0.3万人学习

简单聊聊mysql8与网络通信
简单聊聊mysql8与网络通信

共1课时 | 801人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号