Java中的Cursor使用详解

 更新时间:2025年02月27日 17:06:12   作者:我是坑货  
本文介绍了Java中的Cursor接口及其在大数据集处理中的优势,包括逐行读取、分页处理、流控制、动态改变查询、并发控制和减少网络流量等,感兴趣的朋友一起看看吧

最近看代码,有一段代码涉及到Cursor,感觉写法挺有意思的。注意是Cursor,而不是Consumer,我之前把两个搞混了,看代码看的浑浑噩噩的。

这里说的Cursor,一般来是JDBC的工具,像我在项目中的mybatis里面的Cursor。

//
// Source code recreated from a .class file by IntelliJ IDEA
// (powered by FernFlower decompiler)
//
package org.apache.ibatis.cursor;
import java.io.Closeable;
public interface Cursor<T> extends Closeable, Iterable<T> {
    boolean isOpen();
    boolean isConsumed();
    int getCurrentIndex();
}

Cursor用途一般就是遍历查询结果集,比如下面

        try(Cursor<AssetDO> cursor = assetMapper.streamQueryAssetByRange(maps)) {
            Iterator<AssetDO> iterator = cursor.iterator();
            List<AssetDO> list = new LinkedList<>();
            while (iterator.hasNext()){
                list.add(iterator.next());
                if(tempCount % limitCount == 0){
                    consumer.accept(list);
                    list = new ArrayList<>();
                }
                assetCount++;
                tempCount++;
            }
            if(CollectionUtil.isNotEmpty(list)) {
                consumer.accept(list);
            }
        } catch (IOException e) {
            log.info(e.getMessage(), e);
        }

实际上不用这个我们也可以遍历,直接查出结果集来遍历,为什么还要用Cursor在包装一层来遍历。
实际上这个在数据量小的时候,实际上没啥差距,甚至普通的查询遍历可读性更强。主要是面对数据量大的时候,也就是大数据集处理会体现出的优势,主要的原理就是它可以逐行读取数据,而不是先把整个结果集读取加载到内存中,这样就可以节省内存空间。实际上我们项目就会涉及到一个盘点的功能,当涉及到范围广数据量大的情况,Cursor就很适合这种情况。

这边说一下Cursor的优势:

  • 大数据集处理:

逐行读取:
Cursor允许你逐行读取数据,而不是一次性将整个结果集加载到内存中。这对于处理非常大的数据集特别有用,因为它可以极大地减少内存消耗,避免内存溢出。

分页处理: 可以根据需要处理一部分数据,然后再读取下一部分,这样可以实现数据的分页加载。

  • 流控制:

动态读取: 你不需要在开始时等待整个结果集从数据库读取完毕,可以立即处理第一条记录,对于响应时间非常重要的应用场景非常有利。
动态改变查询: 使用Cursor可以动态改变查询条件或者操作,而不是一次性固定查询数据。

  • 并发控制:

提高并发性: Cursor可以提高数据库多用户并发访问的性能,因为每个用户只会锁定当前正在读取的行,而不是整个表或表的很大一部分。
事务一致性: Cursor可以与数据库事务很好地结合,确保在事务处理期间数据的完整性和一致性。

  • 减少网络流量:

在客户端与数据库服务器之间的网络通信中,Cursor可以减少网络流量,因为它逐行读取数据,而不是一次性传输整个结果集。

代码上去看Cursor带代码,首先是接口,接口是相当于一个规定,你可以根据这个规定写出一个更好的实现方案,这里就先看一下Cursor接口的三个方法:

isOpen()方法用于检查游标是否已经打开。如果游标已经打开并且可以使用,该方法返回true,否则返回false。
isConsumed()方法用于检查游标中的所有数据是否都已经被处理。如果游标中的所有数据都已经被读取或者使用,该方法返回true,否则返回false。
getCurrentIndex()方法返回当前游标位于结果集的索引位置。这个索引位置从0开始计数,它可以用来跟踪已经处理的行数或条目数

这三个方法我们可以判断是否数据集,一行一行读取是否能读完,当前索引,这对我们遍历很有用,本身这个接口就是Iterable迭代器。

一般我们选择的ORM都会对应这个接口有对应的某人实现DefaultCursor。这个我么们可以通过idea工具来查看,总之当遇到一个大数据集加载导致占用内存飙升甚至内存溢出,可以考虑采用这个Cursor工具,来减小内存占用以及Cursor的并发提高效率算短时间。

值得注意的是Cursor用使用try-with-resources语句来自动关闭它,不要占用宝贵的数据库连接。

到此这篇关于Java中的Cursor使用详解的文章就介绍到这了,更多相关Java Cursor使用内容请搜索脚本之家以前的文章或继续浏览下面的相关文章希望大家以后多多支持脚本之家!

相关文章

  • 如何在SpringBoot项目中使用Oracle11g数据库

    如何在SpringBoot项目中使用Oracle11g数据库

    这篇文章主要介绍了在SpringBoot项目中使用Oracle11g数据库的操作,具有很好的参考价值,希望对大家有所帮助。如有错误或未考虑完全的地方,望不吝赐教
    2021-06-06
  • Java使用ChatGPT的API详解

    Java使用ChatGPT的API详解

    OpenAI API 几乎可以应用于任何涉及理解或生成自然语言或代码的任务。本文将带你们介绍Java如何使用ChatGPT的API,感兴趣的同学可以跟着小编一起来学习
    2023-04-04
  • 使用Spring Cloud Stream处理Java消息流的操作流程

    使用Spring Cloud Stream处理Java消息流的操作流程

    Spring Cloud Stream是一个用于构建消息驱动微服务的框架,能够与各种消息中间件集成,如RabbitMQ、Kafka等,今天我们来探讨如何使用Spring Cloud Stream来处理Java消息流,需要的朋友可以参考下
    2024-08-08
  • 数据结构与算法之并查集(不相交集合)

    数据结构与算法之并查集(不相交集合)

    并查集是一种挺高效的数据结构。实现简单,只是所有元素统一遵从一个规律所以让办事情的效率高效起来。这篇文章主要介绍了数据结构与算法——并查集(不相交集合),需要的朋友可以参考下
    2019-11-11
  • 使用Java获取linux和window序列号

    使用Java获取linux和window序列号

    这篇文章主要为大家详细介绍了如何使用Java获取Windows和Linux系统上的CPU序列号、磁盘、mac地址等信息,感兴趣的小伙伴可以跟随小编一起学习一下
    2024-01-01
  • java中生产者消费者问题和代码案例

    java中生产者消费者问题和代码案例

    大家好,本篇文章主要讲的是java中生产者消费者问题和代码案例,感兴趣的同学赶快来看一看吧,对你有帮助的话记得收藏一下
    2022-02-02
  • 关于JDK8升级17及springboot 2.x升级3.x详细指南

    关于JDK8升级17及springboot 2.x升级3.x详细指南

    这篇文章主要介绍了关于JDK8升级17及springboot 2.x升级3.x的相关资料,还讨论了JPA包路径从javax改为jakarta,以及Spring Boot版本升级和Redis配置调整等,需要的朋友可以参考下
    2025-01-01
  • Java使用Apache Commons高效处理CSV文件的操作指南

    Java使用Apache Commons高效处理CSV文件的操作指南

    在 Java 开发中,CSV(Comma-Separated Values,逗号分隔值)是一种常见的数据存储格式,广泛用于数据交换和简单的存储任务,本文将介绍Java使用Apache Commons高效处理CSV文件的操作指南,需要的朋友可以参考下
    2025-03-03
  • 关于为何说JAVA中要慎重使用继承详解

    关于为何说JAVA中要慎重使用继承详解

    Java继承是面向对象的最显著的一个特征,然而下面这篇文章主要给大家介绍了关于为何说JAVA中要慎重使用继承的相关资料,文中通过示例代码介绍的非常详细,需要的朋友可以参考借鉴,下面随着小编来一起学习学习吧
    2018-08-08
  • SPRING IOC注入方式过程解析

    SPRING IOC注入方式过程解析

    这篇文章主要介绍了SPRING IOC注入方式过程解析,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参考下
    2020-01-01

最新评论