MybatisPlus拦截器如何实现数据表分表

 更新时间:2024年11月06日 09:29:12   作者:樘棣寂寂  
为了解决MySQL中大数据量的查询效率问题,采用水平拆分策略,通过取模运算确定表后缀,实现数据的有效管理,设计分表时,需利用线程变量存取请求参数,并通过拦截器确定操作的具体表名,从而优化数据处理性能,此方法适用于业务表数据量大或快速增长的场景

MybatisPlus拦截器实现数据表分表

很多项目都会存在一些数据量很大或者数据量增加很快的业务表,由于mysql的数据量达到一定量后会影响我们的查询效率,为了避免该类问题发生,我们需要在项目前期设计的时候针对这两类情况做一个分表的设计。

这里的分表指的是水平拆分(只是表名不同,其余字段都一致,主键id不允许重复),对某一个数字取模运算做为拆分后表的后缀名,具体要分多少张表可通过自己实际的项目情况确定。

首先创建请求参数传递的一个辅助类

/**
 * 请求参数传递辅助类
 */
public class RequestDataHelper {
    /**
     * 请求参数存取
     */
    private static final ThreadLocal<Map<String, Object>> REQUEST_DATA = new ThreadLocal<>();

    /**
     * 设置请求参数
     *
     * @param requestData 请求参数 MAP 对象
     */
    public static void setRequestData (Map<String, Object> requestData) {
        REQUEST_DATA.set(requestData);
    }

    /**
     * 获取请求参数
     *
     * @return 请求参数 MAP 对象
     */
    public static Map<String, Object> getRequestData () {
        return REQUEST_DATA.get();
    }
}

该辅助类主要作用有:

  • a.设置请求参数
  • b.将请求参数存取到线程变量中
  • c.获取请求参数

简单的说就是在涉及到需要分表的数据操作时,将请求参数放入线程变量中。

然后在拦截器里面获取这个参数,做特定的处理,找到我们具体要操作的那张表。

这里的请求参数大家可以把它理解成跟我们分表后的表名产生关联的数据。

这里面的线程变量是仅在当前线程下可使用的数据,与其他线程做隔离。

在本文中不做详细解释。

在涉及到分表的数据层操作前(Mybatisplus或者Mybatis增删改查数据前)

将请求参数放入线程变量

RequestDataHelper.setRequestData(Collections.singletonMap("studentId", param.getStudentId()));
        LambdaQueryWrapper<StudentRecordEntity> queryWrapper = new LambdaQueryWrapper<>();
        queryWrapper.eq(StudentRecordEntity::getStudentId, param.getStudentId());
        List<StudentRecordEntity> studentRecordEntityList = super.list(queryWrapper);

Mybatisplus 拦截器代码

/**
     * Mybatis plus 拦截器
     */
    @Bean
    public MybatisPlusInterceptor mybatisPlusInterceptor() {
        MybatisPlusInterceptor interceptor = new MybatisPlusInterceptor();

        //动态表插件
        DynamicTableNameInnerInterceptor dynamicTableNameInnerInterceptor = new DynamicTableNameInnerInterceptor();
        dynamicTableNameInnerInterceptor.setTableNameHandler((sql, tableName) -> {
            // 获取参数方法
            if (tableName.equalsIgnoreCase("t_student_record")) {
                Map<String, Object> paramMap = RequestDataHelper.getRequestData();
                long studentId= Long.parseLong(String.valueOf(paramMap.get("studentId")));
                int mod = (int) (studentId% 16);
                return tableName + "_" + mod;

            } else {
                return tableName;
            }
        });
        interceptor.addInnerInterceptor(dynamicTableNameInnerInterceptor);
        return interceptor;
    }

这里面t_student_record表就是要拆分的表,如果有多个,在if里面写多个。

studentId就是调用的时候传入线程变量的请求参数,对它%16就是分了16张表,根据实际业务情况,需要分多少张就把%后面的数字改为多少。

总结

以上为个人经验,希望能给大家一个参考,也希望大家多多支持脚本之家。

相关文章

  • MYSQL根据JSON列将一行拆为多行的操作方法

    MYSQL根据JSON列将一行拆为多行的操作方法

    这篇文章主要介绍了MYSQL根据JSON列将一行拆为多行的操作方法,本文通过实例代码给大家介绍的非常详细,对大家的学习或工作具有一定的参考借鉴价值,需要的朋友可以参考下
    2023-06-06
  • MySQL8.0窗口函数入门实践及总结

    MySQL8.0窗口函数入门实践及总结

    这篇文章主要给大家介绍了关于MySQL8.0窗口函数入门实践及总结的相关资料,文中通过示例代码介绍的非常详细,对大家的学习或者使用MySQL8.0具有一定的参考学习价值,需要的朋友们下面来一起学习学习吧
    2020-06-06
  • 如何解决MySQL this is incompatible with sql_mode=only_full_group_by问题

    如何解决MySQL this is incompatible with sql_mode=only_full_

    MySQL的ONLY_FULL_GROUP_BY模式要求在使用GROUP BY时,SELECT语句中引用的所有列必须在GROUP BY子句中明确指定,或者是聚合函数的一部分,本文提供了修改SQL语句、使用聚合函数、禁用ONLY_FULL_GROUP_BY等解决方法,并强调了在禁用该模式时应评估其影响
    2024-11-11
  • MySQL中聚簇索引和非聚簇索引的区别及说明

    MySQL中聚簇索引和非聚簇索引的区别及说明

    聚簇索引决定数据物理存储顺序,每表仅一个,叶子节点存数据行;非聚簇索引独立存储,可多个,叶子节点存主键指针,聚簇索引适合主键查询,范围效率高;非聚簇需回表,维护成本低,合理选择提升性能
    2025-08-08
  • mysql 8.0.25之取巧解决修改密码报错的问题

    mysql 8.0.25之取巧解决修改密码报错的问题

    这篇文章主要介绍了mysql8.0.25之取巧解决修改密码报错的问题,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教
    2024-05-05
  • MySQL 字符集、排序规则与查询关系最佳实践

    MySQL 字符集、排序规则与查询关系最佳实践

    MySQL查询是否区分大小写和重音敏感由字符集与排序规则决定,推荐使用utf8mb4字符集及utf8mb4_general_ci排序规则,本文给大家介绍MySQL字符集、排序规则与查询关系详解,感兴趣的朋友一起看看吧
    2025-06-06
  • MySQL中日期和时间戳互相转换的函数和方法

    MySQL中日期和时间戳互相转换的函数和方法

    这篇文章主要介绍了MySQL中日期和时间戳互相转换的函数和方法,本文分别讲解了时间戳转换成日期的方法和把日期转换为时间戳的方法,需要的朋友可以参考下
    2015-06-06
  • mysql实现根据多个字段查找和置顶功能

    mysql实现根据多个字段查找和置顶功能

    在mysql中,如果要实现根据某个字段排序的时候,可以使用下面的SQL语句,下面为大家介绍下如何实现根据多个字段查找和置顶功能
    2013-11-11
  • Ubuntu配置Mysql主从数据库

    Ubuntu配置Mysql主从数据库

    MySQL数据库支持数据库的主从复制功能,因此在集群方面具有其独特的优势。众多国内外大型网站架构体系中,均采用了MySQL的主从数据库配置来实现查询负载、数据库热备等功能。本人在实际的Web项目中也涉及到这一需求,在此将如何配置实现做个简单小结。
    2014-07-07
  • mysql数据库在表中添加数据三种操作方式

    mysql数据库在表中添加数据三种操作方式

    这篇文章主要介绍了mysql数据库在表中添加数据三种方式,首先创建数据库和表,创建完成后就可以进行添加数据的操作了,本文结合实例代码给大家介绍的非常详细,需要的朋友可以参考下
    2023-08-08

最新评论