MySQL深分页问题四种方案小结
更新时间：2024年11月04日 11:32:25 作者：北i
在数据量大时,深分页查询速度缓慢,主要原因是多次回表查询,优化方法主要介绍了四种,各方法适用于不同场景,本文就来详细的介绍一下,感兴趣的可以了解一下
mysql深分页问题：
这个问题在实际项目中很常见，当数据量大以后，分页会非常的慢（几年前做过一个调度日志的分页查询，简直没法用）
深分页为什么慢
前言：N个条件为索引，id为主键
平常分页一般也是用的PageHelper插件，最终SQL就大致长这个样：
select id,name from table_name where N个条件 limit 100000,10;
它的执行流程：
- 先去二级索引过滤数据，然后找到主键ID
- 通过ID回表查询数据，取出需要的列
- 扫描满足条件的100010，丢弃前面100000条，返回
这里很明显的不足就是，明明只需要拿10条，确多回表了100000次
优化
1. 通过子查询优化
优化回表次数
select id,name FROM table_name t1 where id >= (select id from table_name where update_time >= '2024-04-01 23:59:59' limit 100000, 1) AND update_time >= '2024-04-01 23:59:59' LIMIT 10;
流程：根据条件在二级索引进行匹配，得出结果ID后，外层查询再根据结果ID向后查10个即可
2. 通过 INNER JOIN 优化
优化回表次数
SELECT t1.id,t1.name FROM table_name t1 INNER JOIN (SELECT t2.id FROM table_name t2 WHERE t2.update_time >= '2024-04-01 23:59:59' ORDER BY t2.update_time LIMIT 100000, 10) AS t3 on t1.id= t3.id;
上面两种方式其核心点都是 优化回表次数 这个角度去进行优化，但是扫描的行却并没有减少，下面有两种是从减少扫描行入手的方式，不过都有一定限制
3. 标签记录法
记录上次查询的最大ID，再请求下一页的时候
select id,name FROM table_name where id > 100000 order by id limit 10;
4. between...and...
select id,name FROM table_name where id between 100000 and 100010 order by id;
局限性：依赖于连续自增的字段（如果不连续，可以order by 一下 ）
补充
| 是否可带条件 | 适用场景 | |
| 子查询 | 是 | 后台系统多条件分页 |
| INNER JOIN | 是 | 后台系统多条件分页 |
| 标签记录法 | 否 | 滑动分页(如app商品列表、新闻资讯列表) |
| between...and... | 否 | 滑动分页 |
之前在项目后台管理系统中采用的 标签记录法，根据条件快速定位到ID，然后再次根据条件向后扫描指定行数，前端也一并改造，禁止输入页数，仅允许点击下一页上一页[既然都出现深分页问题了，那业务也不需要支持使用者随意跳页，因为没有任何意义，他要跳到八千五百三十一页看什么呢？]
到此这篇关于MySQL深分页问题四种方案小结的文章就介绍到这了,更多相关MySQL深分页内容请搜索脚本之家以前的文章或继续浏览下面的相关文章希望大家以后多多支持脚本之家！
相关文章
这篇文章主要介绍了MySQL中隔离级别RC与RR的区别及说明，具有很好的参考价值，希望对大家有所帮助。如有错误或未考虑完全的地方，望不吝赐教2022-08-08
在本篇文章里小编给大家整理的是一篇关于MySQL给新建用户并赋予权限最简单的方法，需要的朋友们参考下。2019-11-11
文章介绍了MySQL 8的安装步骤,包括配置忽略大小写、备份数据、停止和删除数据库文件、配置my.cnf文件、初始化、启动服务和登录设置密码,还讨论了在配置远程连接时遇到的常见问题,特别是MySQL 8版本中由于密码加密方法变化导致的问题解决方法2024-11-11
这篇文章主要给大家介绍了利用MySQL统计一列中不同值的数量的几种解决方法，每种方法都给了详细的示例代码供大家参考学习，相信对大家具有一定的参考价值，需要的朋友们下面跟随小编一起来看看吧。2017-04-04
这篇文章主要为大家详细介绍了MySQL中索引失效场景,原因以及解决方法,文中的示例代码讲解详细,感兴趣的小伙伴可以跟随小编一起学习一下2025-07-07
解决MySQL报错incorrect datetime value '0000-00-00 00:00
这篇文章主要给大家介绍了关于如何解决MySQL报错incorrect datetime value '0000-00-00 00:00:00' for column的相关资料,文中通过代码示例介绍的非常详细,需要的朋友可以参考下2023-08-08
这篇文章主要介绍了MySQL修改字符集的方法，帮助大家更好的理解和使用MySQL数据库，感兴趣的朋友可以了解下2021-01-01
这篇文章主要介绍了Mysql BinLog存储机制与数据恢复方式,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教2024-06-06
这篇文章主要介绍了mysql的计划任务与事件调度,结合实例形式分析了mysql计划任务与事件调度相关概念、原理、用法与操作注意事项,需要的朋友可以参考下2019-12-12
这篇文章主要介绍了mysql连接数清理方案,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教2025-10-10
最新评论