脚本之家 服务器常用软件
快捷导航
您的位置：首页 → 数据库 → Mysql → mysql去重查询

mysql去重查询的三种方法小结

 更新时间：2023年03月28日 16:23:16   作者：小马穿云  
本文主要介绍了mysql去重查询的三种方法小结，文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值，需要的朋友们下面随着小编来一起学习学习吧

前言

数据库生成环境中经常会遇到表中有重复的数据，或者进行关联过程中产生重复数据，下面介绍三种剔除重复数据的方法，请针对自己的应用场景选择使用。

一、插入测试数据

下图测试数据中user_name为lilei、zhaofeng的用户是重复数据。

二、剔除重复数据方法

1.方法一：使用distinct

代码如下（示例）：

select distinct user_name,email,address from t_user;

如下图，已将数据剔重，重复数据仅保留1条。

2.方法二：使用group by

SELECT user_name,email,address 
	FROM t_user 
	GROUP BY user_name, email, address;

如下图，已将数据剔重，重复数据仅保留1条。

3.方法三：使用开窗函数

（1）如果你的数据库是MySQL8以上版本你可以直接使用开窗函数row_number()

SELECT *
FROM(
    SELECT t.*, 
           ROW_NUMBER() OVER(PARTITION BY user_name
           ORDER BY last_login DESC) rn
    FROM table AS t
	) AS t_user
WHERE rn = 1;

（2）如果你的数据库版本低于MySQL8，使用类row_number()方法

select user_name, email, address 
from (
	select 
		b.*,
		@rownum := @rownum+1 ,-- 定义用户变量@rownum来记录数据的行号
		if(@pdept=b.user_name,@rank:=@rank+1,@rank:=1) as rank,-- 如果当前分组user_name和上一次分组user_name相同，则@rank（对每一组的数据进行编号）值加1，否则表示为新的分组，从1开始
		@pdept:=b.user_name -- 定义变量@pdept用来保存上一次的分组id
	from (select * from t_user) b ,
		(select @rownum :=0 , @pdept := null ,@rank:=0) c  -- 初始化自定义变量值
	order by b.user_name,b.last_login desc -- 该排序必须，否则结果会不对
) result
where rank = 1;

如下图，已将数据剔重，重复数据仅保留1条。

总结

到此这篇关于mysql去重查询的三种方法小结的文章就介绍到这了,更多相关mysql去重查询内容请搜索脚本之家以前的文章或继续浏览下面的相关文章希望大家以后多多支持脚本之家！

您可能感兴趣的文章:

相关文章

  • mysql 事务解析

    mysql 事务解析

    这篇文章主要给大家分享的是mysql事务解析，事务(transaction)是业务逻辑的一个基本的单元组成，下面文章围绕mysql事务的相关资料展开详细内容,需要的朋友可以参考一下希望对大家有所帮助
    2021-11-11
  • 批量清除128组节点db上面过期的binlog释放磁盘空间实现思路

    批量清除128组节点db上面过期的binlog释放磁盘空间实现思路

    在 一台db跳转机上面, 写一个脚本,访问slave,远程获取正在复制的master上面的binlog位置, 然后再远程去purge master上面的binlog
    2013-06-06
  • mysql limit分页优化详细介绍

    mysql limit分页优化详细介绍

    MySQL最常用也最需要优化的就是limit，MySQL的limit给分页带来了极大的方便，但数据量一大的时候，limit的性能就急剧下降,需要的朋友可以参考下
    2016-12-12
  • Mysql中的排序规则utf8_unicode_ci、utf8_general_ci的区别总结

    Mysql中的排序规则utf8_unicode_ci、utf8_general_ci的区别总结

    Mysql中utf8_general_ci与utf8_unicode_ci有什么区别呢？在编程语言中，通常用unicode对中文字符做处理，防止出现乱码，那么在MySQL里，为什么大家都使用utf8_general_ci而不是utf8_unicode_ci呢？
    2014-04-04
  • 详解MySQL中InnoDB的存储文件

    详解MySQL中InnoDB的存储文件

    本篇是一篇关于MySQL专题知识点的内容，详细讲述了InnoDB的存储文件的相关内容，感兴趣的朋友学习下。
    2018-02-02
  • MySql5.6使用validate password 插件加强密码强度的安装及使用方法

    MySql5.6使用validate password 插件加强密码强度的安装及使用方法

    在mysql5.6中使用validate password插件加强密码强度，支持密码的强度要求，是一款非常好用的密码加强插件，下面小编通过本文给大家介绍MySql5.6使用validate password 插件加强密码强度的安装及使用方法，小伙伴们一起学习吧
    2016-07-07
  • MySQL 复制表的方法

    MySQL 复制表的方法

    这篇文章主要介绍了MySQL 复制表的方法，帮助大家更好的理解和学习使用MySQL，感兴趣的朋友可以了解下
    2021-03-03
  • 详解mysql中explain的type

    详解mysql中explain的type

    这篇文章主要介绍了mysql中explain的type的相关资料，帮助大家更好的理解和使用MySQL，感兴趣的朋友可以了解下
    2020-11-11
  • MySQL查询优化:连接查询排序浅谈

    MySQL查询优化:连接查询排序浅谈

    不知道有没有人碰到过这样恶心的问题：两张表连接查询并limit，SQL效率很高，但是加上order by以后，语句的执行时间变的巨长，效率巨低。下边就来看看这个问题需要如何解决
    2013-02-02
  • zabbix监控MySQL的两种方式(最全)

    zabbix监控MySQL的两种方式(最全)

    Zabbix是一款开源的企业级监控系统,它主要用于网络监视、性能分析以及故障报警,管理员可以通过Zabbix Web界面设置监控规则、图形化展示数据,本文给大家介绍了zabbix监控MySQL的两种方式,需要的朋友可以参考下
    2024-08-08

最新评论