MySQL深分页问题四种方案小结

 更新时间:2024年11月04日 11:32:25   作者:北i  
在数据量大时,深分页查询速度缓慢,主要原因是多次回表查询,优化方法主要介绍了四种,各方法适用于不同场景,本文就来详细的介绍一下,感兴趣的可以了解一下

mysql深分页问题:
这个问题在实际项目中很常见,当数据量大以后,分页会非常的慢(几年前做过一个调度日志的分页查询,简直没法用)

深分页为什么慢

 前言:N个条件为索引,id为主键
平常分页一般也是用的PageHelper插件,最终SQL就大致长这个样:

select id,name from table_name where N个条件 limit 100000,10;

它的执行流程:

  • 先去二级索引过滤数据,然后找到主键ID
  • 通过ID回表查询数据,取出需要的列
  • 扫描满足条件的100010,丢弃前面100000条,返回

这里很明显的不足就是,明明只需要拿10条,确多回表了100000次

优化

1. 通过子查询优化

优化回表次数

select id,name FROM table_name t1 where id >= (select id from table_name where update_time >= '2024-04-01 23:59:59' limit 100000, 1) AND update_time >= '2024-04-01 23:59:59' LIMIT 10;

流程:根据条件在二级索引进行匹配,得出结果ID后,外层查询再根据结果ID向后查10个即可

2. 通过 INNER JOIN 优化

优化回表次数

SELECT t1.id,t1.name FROM table_name t1 INNER JOIN (SELECT t2.id FROM table_name t2 WHERE t2.update_time >= '2024-04-01 23:59:59' ORDER BY t2.update_time LIMIT 100000, 10) AS t3 on t1.id= t3.id;

上面两种方式其核心点都是 优化回表次数 这个角度去进行优化,但是扫描的行却并没有减少,下面有两种是从减少扫描行入手的方式,不过都有一定限制

3. 标签记录法

记录上次查询的最大ID,再请求下一页的时候

select id,name FROM table_name where id > 100000 order by id limit 10;

4. between...and...

select  id,name FROM table_name where id between 100000 and 100010 order by id;

局限性:依赖于连续自增的字段(如果不连续,可以order by 一下 )

补充

是否可带条件适用场景
子查询后台系统多条件分页
INNER JOIN后台系统多条件分页
标签记录法滑动分页(如app商品列表、新闻资讯列表)
between...and...滑动分页

之前在项目后台管理系统中采用的 标签记录法,根据条件快速定位到ID,然后再次根据条件向后扫描指定行数,前端也一并改造,禁止输入页数,仅允许点击下一页上一页[既然都出现深分页问题了,那业务也不需要支持使用者随意跳页,因为没有任何意义,他要跳到八千五百三十一页看什么呢?]

到此这篇关于MySQL深分页问题四种方案小结的文章就介绍到这了,更多相关MySQL深分页内容请搜索脚本之家以前的文章或继续浏览下面的相关文章希望大家以后多多支持脚本之家!

相关文章

  • MySQL 4G内存服务器配置优化

    MySQL 4G内存服务器配置优化

    MySQL对于web架构性能的影响最大,也是关键的核心部分。下面我们了解一下MySQL优化的一些基础,MySQL自身(my.cnf)的优化
    2017-07-07
  • MySQL重定位数据目录的方法

    MySQL重定位数据目录的方法

    这篇文章主要介绍了MySQL重定位数据目录的实现方法,分析了重定位MySQL数据目录的实现原理与技巧,具有一定的参考借鉴价值,需要的朋友可以参考下
    2014-12-12
  • mysql中向表中某字段追加字符串的方法

    mysql中向表中某字段追加字符串的方法

    mysql中向表中某字段追加字符串的方法...
    2007-03-03
  • mysql增加新用户无法登陆解决方法

    mysql增加新用户无法登陆解决方法

    在使用mysql增加新用户之后,发现新增的用户无法登陆,一时束手无策,网上搜集整理了一下,晒出来和大家分享一下,希望可以帮助你们
    2012-11-11
  • 在MySQL中分析平均响应时间最长的SQL的六种方法

    在MySQL中分析平均响应时间最长的SQL的六种方法

    这篇文章主要介绍了在MySQL中分析平均响应时间最长的SQL的六种方法,主要方法包括使用PerformanceSchema、SysSchema、慢查询日志、详细性能分析、按模式分类、实时监控和快照对比,推荐结合使用,需要的朋友可以参考下
    2025-10-10
  • MySQL UPDATE 语句的非标准实现代码

    MySQL UPDATE 语句的非标准实现代码

    这篇文章主要介绍了MySQL UPDATE 语句的非标准实现代码,本文给大家介绍的非常详细,对大家的学习或工作具有一定的参考借鉴价值,需要的朋友可以参考下
    2021-04-04
  • mysql字段为NULL索引是否会失效实例详解

    mysql字段为NULL索引是否会失效实例详解

    有很多人对null值是否走索引感觉很疑惑,所以下面这篇文章主要给大家介绍了关于mysql字段为NULL索引是否会失效的相关资料,文中通过示例代码介绍的非常详细,需要的朋友可以参考下
    2022-05-05
  • sql ROW_NUMBER()与OVER()方法案例详解

    sql ROW_NUMBER()与OVER()方法案例详解

    这篇文章主要介绍了sql ROW_NUMBER()与OVER()方法案例详解,本篇文章通过简要的案例,讲解了该项技术的了解与使用,以下就是详细内容,需要的朋友可以参考下
    2021-08-08
  • 一文总结MySQL中数学函数有哪些

    一文总结MySQL中数学函数有哪些

    MySQL函数包括数学函数、字符串函数、日期和时间函数、条件判断函数、系统信息函数、加密函数等,下面这篇文章主要给大家介绍了关于MySQL中数学函数有哪些的相关资料,需要的朋友可以参考下
    2023-02-02
  • MySQL触发器的使用

    MySQL触发器的使用

    触发器用于在 MySQL 执行插入、更新或删除语句时,自动触发执行其他SQL代码。本文讲解触发器的正确使用方式
    2021-05-05

最新评论