Java中的Cursor使用详解

 更新时间:2025年02月27日 17:06:12   作者:我是坑货  
本文介绍了Java中的Cursor接口及其在大数据集处理中的优势,包括逐行读取、分页处理、流控制、动态改变查询、并发控制和减少网络流量等,感兴趣的朋友一起看看吧

最近看代码,有一段代码涉及到Cursor,感觉写法挺有意思的。注意是Cursor,而不是Consumer,我之前把两个搞混了,看代码看的浑浑噩噩的。

这里说的Cursor,一般来是JDBC的工具,像我在项目中的mybatis里面的Cursor。

//
// Source code recreated from a .class file by IntelliJ IDEA
// (powered by FernFlower decompiler)
//
package org.apache.ibatis.cursor;
import java.io.Closeable;
public interface Cursor<T> extends Closeable, Iterable<T> {
    boolean isOpen();
    boolean isConsumed();
    int getCurrentIndex();
}

Cursor用途一般就是遍历查询结果集,比如下面

        try(Cursor<AssetDO> cursor = assetMapper.streamQueryAssetByRange(maps)) {
            Iterator<AssetDO> iterator = cursor.iterator();
            List<AssetDO> list = new LinkedList<>();
            while (iterator.hasNext()){
                list.add(iterator.next());
                if(tempCount % limitCount == 0){
                    consumer.accept(list);
                    list = new ArrayList<>();
                }
                assetCount++;
                tempCount++;
            }
            if(CollectionUtil.isNotEmpty(list)) {
                consumer.accept(list);
            }
        } catch (IOException e) {
            log.info(e.getMessage(), e);
        }

实际上不用这个我们也可以遍历,直接查出结果集来遍历,为什么还要用Cursor在包装一层来遍历。
实际上这个在数据量小的时候,实际上没啥差距,甚至普通的查询遍历可读性更强。主要是面对数据量大的时候,也就是大数据集处理会体现出的优势,主要的原理就是它可以逐行读取数据,而不是先把整个结果集读取加载到内存中,这样就可以节省内存空间。实际上我们项目就会涉及到一个盘点的功能,当涉及到范围广数据量大的情况,Cursor就很适合这种情况。

这边说一下Cursor的优势:

  • 大数据集处理:

逐行读取:
Cursor允许你逐行读取数据,而不是一次性将整个结果集加载到内存中。这对于处理非常大的数据集特别有用,因为它可以极大地减少内存消耗,避免内存溢出。

分页处理: 可以根据需要处理一部分数据,然后再读取下一部分,这样可以实现数据的分页加载。

  • 流控制:

动态读取: 你不需要在开始时等待整个结果集从数据库读取完毕,可以立即处理第一条记录,对于响应时间非常重要的应用场景非常有利。
动态改变查询: 使用Cursor可以动态改变查询条件或者操作,而不是一次性固定查询数据。

  • 并发控制:

提高并发性: Cursor可以提高数据库多用户并发访问的性能,因为每个用户只会锁定当前正在读取的行,而不是整个表或表的很大一部分。
事务一致性: Cursor可以与数据库事务很好地结合,确保在事务处理期间数据的完整性和一致性。

  • 减少网络流量:

在客户端与数据库服务器之间的网络通信中,Cursor可以减少网络流量,因为它逐行读取数据,而不是一次性传输整个结果集。

代码上去看Cursor带代码,首先是接口,接口是相当于一个规定,你可以根据这个规定写出一个更好的实现方案,这里就先看一下Cursor接口的三个方法:

isOpen()方法用于检查游标是否已经打开。如果游标已经打开并且可以使用,该方法返回true,否则返回false。
isConsumed()方法用于检查游标中的所有数据是否都已经被处理。如果游标中的所有数据都已经被读取或者使用,该方法返回true,否则返回false。
getCurrentIndex()方法返回当前游标位于结果集的索引位置。这个索引位置从0开始计数,它可以用来跟踪已经处理的行数或条目数

这三个方法我们可以判断是否数据集,一行一行读取是否能读完,当前索引,这对我们遍历很有用,本身这个接口就是Iterable迭代器。

一般我们选择的ORM都会对应这个接口有对应的某人实现DefaultCursor。这个我么们可以通过idea工具来查看,总之当遇到一个大数据集加载导致占用内存飙升甚至内存溢出,可以考虑采用这个Cursor工具,来减小内存占用以及Cursor的并发提高效率算短时间。

值得注意的是Cursor用使用try-with-resources语句来自动关闭它,不要占用宝贵的数据库连接。

到此这篇关于Java中的Cursor使用详解的文章就介绍到这了,更多相关Java Cursor使用内容请搜索脚本之家以前的文章或继续浏览下面的相关文章希望大家以后多多支持脚本之家!

相关文章

  • SpringBoot整合Druid实现SQL监控和数据库密码加密

    SpringBoot整合Druid实现SQL监控和数据库密码加密

    Druid连接池是阿里巴巴开源的数据库连接池项目,Druid连接池为监控而生,内置强大的监控功能,监控特性不影响性能,本文给大家介绍了SpringBoot整合Druid实现SQL监控和数据库密码加密,文中有相关的代码示例供大家参考,需要的朋友可以参考下
    2024-06-06
  • Java 回调机制(CallBack) 详解及实例代码

    Java 回调机制(CallBack) 详解及实例代码

    这篇文章主要介绍了 Java 回调机制(CallBack) 详解及实例代码的相关资料,需要的朋友可以参考下
    2017-02-02
  • Spring装配Bean之用Java代码安装配置bean详解

    Spring装配Bean之用Java代码安装配置bean详解

    这篇文章主要给大家介绍了关于Spring装配Bean之用Java代码安装配置bean的相关资料,文中通过示例代码介绍的非常详细,对大家学习或者使用spring具有一定的参考学习价值,需要的朋友们下面来一起学习学习吧。
    2017-10-10
  • Spring Cloud实现5分钟级区域切换的操作方法

    Spring Cloud实现5分钟级区域切换的操作方法

    Spring Cloud 2023.x通过智能路由预热、多活数据同步和自动化流量切换,实现5分钟内完成跨区域故障转移,本文以某电商平台从AWS亚太切换至阿里云华东的实战为例,详解关键技术路径,需要的朋友可以参考下
    2025-04-04
  • SpringBoot依赖管理的源码解析

    SpringBoot依赖管理的源码解析

    这篇文章主要介绍了SpringBoot依赖管理的源码解析,maven提供了一套依赖管理机制,通过在pom.xml定义坐标,通过坐标从互联网的中央仓库下载依赖的构件(jar包),规范去管理依赖所有构件,这就叫依赖管理,需要的朋友可以参考下
    2023-04-04
  • Java中的JetCache 实战

    Java中的JetCache 实战

    这篇文章主要介绍了Java中的JetCache实战,JetCache是一个基于Java的缓存系统封装,提供统一的API和注解来简化缓存的使用,下文更多相关资料需要的小伙伴可以参考一下
    2022-04-04
  • Java实现Excel数据导出的实战指南

    Java实现Excel数据导出的实战指南

    Excel 导出是后台管理系统中的标配功能,用于将系统数据导出为 Excel 文件供用户下载、分析或归档,本文提供了一个完整的Excel数据导出实战指南,主要针对后台管理系统中的员工信息导出场景,有需要的小伙伴可以了解下
    2026-06-06
  • 深入理解Java中的HashMap的实现机制

    深入理解Java中的HashMap的实现机制

    这篇文章主要介绍了深入理解Java中的HashMap的实现机制,同时也有助于理解Java中对于哈希函数的相关处理方式,需要的朋友可以参考下
    2015-07-07
  • SpringBoot中创建bean的7种方式总结

    SpringBoot中创建bean的7种方式总结

    Spring是一款广泛应用于企业级应用程序开发的Java框架,其 IOC 和 DI 特性可以有效地管理应用程序中的对象,提高了应用程序的可维护性和可扩展性,那你知道spring有哪些方式将bean放入容器嘛,今天就给大家总结一下
    2023-07-07
  • Hibernate中Session增删改查操作代码详解

    Hibernate中Session增删改查操作代码详解

    这篇文章主要介绍了Hibernate中Session增删改查操作代码详解,具有一定借鉴价值,需要的朋友可以参考下。
    2017-12-12

最新评论