C#使用Linq实现简单去重处理
更新时间：2025年02月20日 08:40:46 作者：我是苏苏
这篇文章主要为大家详细介绍了C#如何使用Linq实现简单去重处理功能,文中的示例代码讲解详细,感兴趣的小伙伴可以跟随小编一起学习一下
一、示例代码
using System;
using System.Collections.Generic;
using System.Linq;
public class Program
{
public static void Main()
{
// 创建一些示例实体对象
var people = new List<Person>
{
new Person { Name = "Alice", Age = 30, City = "New York" },
new Person { Name = "Bob", Age = 25, City = "Los Angeles" },
new Person { Name = "Alice", Age = 30, City = "New York" },//重复的
new Person { Name = "Charlie", Age = 35, City = "Chicago" },
new Person { Name = "Alice", Age = 28, City = "San Francisco" }
};
// 1. 单字段去重
var uniqueNameFields = people.DistinctBy(p =>p.Name).ToList();
Console.WriteLine("指定字段（Name）去重结果,重复则保留第一条:");
foreach (var person in uniqueNameFields)
{
Console.WriteLine($"Name: {person.Name}, Age: {person.Age}, City: {person.City}");
}
// 2. 多字段去重
var uniqueNameAgeFields = people.DistinctBy(p => new { p.Name, p.Age }).ToList();
Console.WriteLine("\n指定字段（Name, Age）去重结果,重复则保留第一条:");
foreach (var person in uniqueNameAgeFields)
{
Console.WriteLine($"Name: {person.Name}, Age: {person.Age}, City: {person.City}");
}
//3.全字段去重
// 通过 GroupBy 按 Name 和 Age 字段去重
var uniquePeople = people.DistinctBy(p => new { p.Name, p.Age, p.City }).ToList();
Console.WriteLine("\n全字段去重:");
foreach (var person in uniquePeople)
{
Console.WriteLine($"Name: {person.Name}, Age: {person.Age}, City: {person.City}");
}
}
}
public class Person
{
public string Name { get; set; }
public int Age { get; set; }
public string City { get; set; }
}二、示例输出
指定字段（Name）去重结果,重复则保留第一条:
Name: Alice, Age: 30, City: New York
Name: Bob, Age: 25, City: Los Angeles
Name: Charlie, Age: 35, City: Chicago
指定字段（Name, Age）去重结果,重复则保留第一条:
Name: Alice, Age: 30, City: New York
Name: Bob, Age: 25, City: Los Angeles
Name: Charlie, Age: 35, City: Chicago
Name: Alice, Age: 28, City: San Francisco
全字段去重:
Name: Alice, Age: 30, City: New York
Name: Bob, Age: 25, City: Los Angeles
Name: Charlie, Age: 35, City: Chicago
Name: Alice, Age: 28, City: San Francisco
三、注意雷点
以下代码不能完成全字段去重，因为people是引用类型，Distinct() 一般用于List<string>,List<int>这些值类型去重，而不涉及引用类型的字段比较。
people.Distinct().ToList()
若需要全字段去重：1.使用DinstinctBy语法，加上所有字段。2.使用标题四的封装方法（反射实现全字段去重）。
四、全字段去重封装方法
1.封装
/// <summary>
/// 通用的全字段去重方法
/// </summary>
/// <returns></returns>
public static IEnumerable<T> DistinctByAllFields<T>(IEnumerable<T> items)
{
// 获取 T 类型的所有字段值
var properties = typeof(T).GetProperties(BindingFlags.Public | BindingFlags.Instance);
return items
.GroupBy(item => string.Join(",", properties.Select(p => p.GetValue(item)))) // 按所有字段值连接生成唯一标识符
.Select(group => group.First()); // 取每组的第一个元素
}2.示例
using System;
using System.Collections.Generic;
using System.Linq;
using System.Reflection;
public class Program
{
public static void Main()
{
// 创建一些示例实体对象
var people = new List<Person>
{
new Person { Name = "Alice", Age = 30, City = "New York" },
new Person { Name = "Bob", Age = 25, City = "Los Angeles" },
new Person { Name = "Alice", Age = 30, City = "New York" },
new Person { Name = "Charlie", Age = 35, City = "Chicago" },
new Person { Name = "Alice", Age = 28, City = "San Francisco" }
};
// 调用封装的去重方法
var uniquePeople = DistinctByAllFields(people).ToList();
Console.WriteLine("根据所有字段去重的结果:");
foreach (var person in uniquePeople)
{
Console.WriteLine($"Name: {person.Name}, Age: {person.Age}, City: {person.City}");
}
}
/// <summary>
/// 通用的全字段去重方法
/// </summary>
/// <returns></returns>
public static IEnumerable<T> DistinctByAllFields<T>(IEnumerable<T> items)
{
// 获取 T 类型的所有字段值
var properties = typeof(T).GetProperties(BindingFlags.Public | BindingFlags.Instance);
return items
.GroupBy(item => string.Join(",", properties.Select(p => p.GetValue(item)))) // 按所有字段值连接生成唯一标识符
.Select(group => group.First()); // 取每组的第一个元素
}
}
public class Person
{
public string Name { get; set; }
public int Age { get; set; }
public string City { get; set; }
}以上就是C#使用Linq实现简单去重处理的详细内容，更多关于C# Linq去重的资料请关注脚本之家其它相关文章！
相关文章
这篇文章主要介绍了C#中矩阵运算方法,实例分析了通过C#实现矩阵的初始化、转置矩阵、求逆矩阵等各种常用的操作技巧,具有一定参考借鉴价值,需要的朋友可以参考下2015-04-04
无论是在WPF中还是WinForm中，都有用户控件（UserControl）和自定义控件（CustomControl），这两种控件都是对已有控件的封装，实现功能重用。但是两者还是有一些区别，本文对这两种控件进行讲解2023-03-03
这篇文章主要介绍了WinForm遍历窗体所有子控件的方法,涉及C#递归遍历相关操作技巧,具有一定参考借鉴价值,需要的朋友可以参考下2016-07-07
这篇文章介绍了C#集合之字典的用法，文中通过示例代码介绍的非常详细。对大家的学习或工作具有一定的参考借鉴价值，需要的朋友可以参考下2022-04-04
这篇文章主要为大家详细介绍了unity3D实现三维物体跟随鼠标，文中示例代码介绍的非常详细，具有一定的参考价值，感兴趣的小伙伴们可以参考一下2019-12-12
c# Task.Wait()与awaiat Task异常处理的区别说明
这篇文章主要介绍了c# Task.Wait()与awaiat Task异常处理的区别说明，具有很好的参考价值，希望对大家有所帮助。如有错误或未考虑完全的地方，望不吝赐教2022-06-06
EasyModbus是一个流行的.NET库,用于实现Modbus TCP、RTU和UDP协议通信,本文就来介绍一下C#使用EasyModbus进行通讯的实现示例,感兴趣的可以了解一下2026-01-01
C# 中将数值型数据转换为字节数组的方法，需要的朋友可以参考一下2013-05-05
本文介绍了基于C#实现二维码和条形码生成及打印的技术方案,包括核心库选型、图像处理、打印实现、高级功能、异常处理、性能优化、部署建议和安全措施,适用于多种打印需求,需要的朋友可以参考下2025-10-10
这篇文章主要为大家详细介绍了Unity实现物体运动时画出轨迹，文中示例代码介绍的非常详细，具有一定的参考价值，感兴趣的小伙伴们可以参考一下2021-09-09
最新评论