java stream distinct()如何按一个或多个指定对象字段进行去重

 更新时间:2023年12月29日 09:13:53   作者:陈賝  
这篇文章主要介绍了java stream distinct()如何按一个或多个指定对象字段进行去重问题,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教

写在前面

本来以为stream应该有类似这种语法,想这样写的,可惜事与愿违,需要开发者换种思路。

List<ProjectInfoVo> acceptances = vo.stream().filter(distinct(b -> b.getProjectId())).collect(Collectors.toList()); 

自带的 distinct 似乎只能将所有字段都相同的数据去重,若不是还请大佬们指导。

List<ProjectInfoVo> acceptances = vo.stream().distinct().collect(Collectors.toList());

方法一:自带方法

Comparator.comparing(p -> p.get***())
  • 单个字段
String sql = "";
List<ProjectInfoVo> vo = jdbcTemplate.query(sql, new BeanPropertyRowMapper<>(ProjectInfoVo.class));
ArrayList<ProjectInfoVo> collect = vo.stream().collect(Collectors.collectingAndThen(
            Collectors.toCollection(() -> new TreeSet<>(
                    Comparator.comparing(p -> p.getProjectId()))), ArrayList::new));
  • 多个字段
String sql = "";
List<ProjectInfoVo> vo = jdbcTemplate.query(sql, new BeanPropertyRowMapper<>(ProjectInfoVo.class));
ArrayList<ProjectInfoVo> collect = vo.stream().collect(Collectors.collectingAndThen(
            Collectors.toCollection(() -> new TreeSet<>(
                    Comparator.comparing(p -> p.getProjectId()+";"+p.getMember()))), ArrayList::new));

方法二:自定义方法

Comparator.comparing(p -> p.get***())

1.自定义方法类——distinctByKey

public class StreamUtils {

    /**
     * 按某个指定字段去重
     *
     * @param keyExtractor 需要去重的字段
     * @return java.util.function.Predicate<T>
     * @author 陈賝
     * @date 2022/9/2 13:49
     */
    public static <T> Predicate<T> distinctByKey(Function<? super T, ?> keyExtractor) {
        Map<Object, Boolean> seen = new ConcurrentHashMap<>();
        return t -> seen.putIfAbsent(keyExtractor.apply(t), Boolean.TRUE) == null;
    }
}

2.使用示例

  • 单个字段
List<ProjectInfoVo> acceptances = vo.stream()
	.filter(StreamUtils.distinctByKey(b -> b.getProjectId()))
	.collect(Collectors.toList());
  • 多个字段
List<ProjectInfoVo> acceptances = vo.stream()
	.filter(StreamUtils.distinctByKey(b -> b.getProjectId()))
	.filter(StreamUtils.distinctByKey(b -> b.getMember()))
	.collect(Collectors.toList());

方法三:Stream API

1.Collectors.toMap

  • 单个字段
    private static List<CompanyVo> mergeAndDistinct(List<CompanyVo> companyVoList) {
//        return companyVoList.stream().collect(Collectors.collectingAndThen(
//                Collectors.toCollection(() -> new TreeSet<>(
//                        Comparator.comparing(CompanyVo::getId))), ArrayList::new));
        return new ArrayList<>(companyVoList.stream()
                .collect(Collectors.toMap(
                        CompanyVo::getId, // 以 id 作为 key
                        companyVo -> companyVo, // 保留 CompanyVo 对象
                        (existing, replacement) -> existing // 如果有重复的 id,保留已有的对象
                )).values());
    }
  • 多个字段
    private static List<CompanyVo> mergeAndDistinct(List<CompanyVo> companyVoList) {
        return new ArrayList<>(companyVoList.stream()
                .collect(Collectors.toMap(
                        companyVo -> companyVo.getId() + "-" + companyVo.getCode(), // 使用 id 和 code 作为 key
                        companyVo -> companyVo, // 保留 CompanyVo 对象
                        (existing, replacement) -> existing // 如果有重复的 id,保留已有的对象
                )).values());
    }

总结

以上为个人经验,希望能给大家一个参考,也希望大家多多支持脚本之家。

相关文章

  • Java面试题冲刺第十一天--集合框架篇(2)

    Java面试题冲刺第十一天--集合框架篇(2)

    这篇文章主要为大家分享了最有价值的两道集合框架的面试题,涵盖内容全面,包括数据结构和算法相关的题目、经典面试编程题等,感兴趣的小伙伴们可以参考一下
    2021-07-07
  • CentOS7和8中安装Maven3.8.4的简单步骤

    CentOS7和8中安装Maven3.8.4的简单步骤

    maven是属于apache的一个工具,主要是对java进行编译打包,解决依赖关系,下面这篇文章主要给大家介绍了关于CentOS7和8中安装Maven3.8.4的相关资料,需要的朋友可以参考下
    2022-04-04
  • Rocketmq之NameServer地址配置及更新过程

    Rocketmq之NameServer地址配置及更新过程

    本文介绍了RocketMQ中NameServer地址的配置方式,主要有三种:系统属性rocketmq.namesrv.addr、环境变量NAMESRV_ADDR和自动获取url地址,只有第三种方式可以在程序运行过程中动态更新NameServer地址
    2026-04-04
  • Java实现学生信息管理系统(借助Array List)

    Java实现学生信息管理系统(借助Array List)

    这篇文章主要为大家详细介绍了Java实现学生信息管理系统,借助Array List,文中示例代码介绍的非常详细,具有一定的参考价值,感兴趣的小伙伴们可以参考一下
    2022-01-01
  • SpringBoot整合aop面向切面编程过程解析

    SpringBoot整合aop面向切面编程过程解析

    这篇文章主要介绍了SpringBoot整合aop面向切面编程过程解析,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参考下
    2020-02-02
  • java计算代码段执行时间的详细代码

    java计算代码段执行时间的详细代码

    java里计算代码段执行时间可以有两种方法,一种是毫秒级别的计算,另一种是更精确的纳秒级别的计算,这篇文章主要介绍了java计算代码段执行时间,需要的朋友可以参考下
    2022-08-08
  • Java通过Lambda函数的方式获取属性名称

    Java通过Lambda函数的方式获取属性名称

    这篇文章主要介绍了通过Lambda函数的方式获取属性名称,实现步骤是通过定义一个函数式接口, 用来接收lambda方法引用,本文结合实例代码给大家介绍的非常详细,需要的朋友可以参考下
    2023-10-10
  • Netty源码分析NioEventLoop线程的启动

    Netty源码分析NioEventLoop线程的启动

    这篇文章主要为大家介绍了Netty源码分析NioEventLoop线程的启动示例,有需要的朋友,可以借鉴参考下,希望能够有所帮助,祝大家多多进步,早日升职加薪
    2022-03-03
  • java OOM内存泄漏原因及解决方法

    java OOM内存泄漏原因及解决方法

    这篇文章主要介绍了java OOM内存泄漏原因及解决方法,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参考下
    2019-08-08
  • SpringBoot返回多种格式的数据的实现示例

    SpringBoot返回多种格式的数据的实现示例

    本文主要介绍了SpringBoot返回多种格式的数据的实现示例,主要包括了FastJson,xml,pdf,excel,资源流,具有一定的参考价值,感兴趣的可以了解一下
    2021-10-10

最新评论