MYSQL统计总条数(需去重)使用的办法总结

以下是关于 SQL 中 GROUP BY 和 DISTINCT 关键字的区别。

GROUP BY 和 DISTINCT 的区别

1. 定义

• DISTINCT:
  • 用于消除查询结果中的重复行，返回唯一值组合。
  • 作用于整个 SELECT 子句的列集。
• GROUP BY:
  • 用于将结果集按指定列分组，通常与聚合函数（如 COUNT、SUM）结合使用。
  • 返回分组键和聚合计算结果。

2. 核心目的不同

• DISTINCT:
  • 专注于 去重，确保结果中无重复记录。
  • 例如：获取唯一客户列表。
• GROUP BY:
  • 专注于 分组和聚合，用于生成汇总统计。
  • 例如：计算每个地区的销售总额。

3. 语法结构差异

• DISTINCT 语法:
  • 直接应用于 SELECT 子句。
  • 示例：

    SELECT DISTINCT column1, column2 FROM table_name;
    

• GROUP BY 语法:
  • 需要 GROUP BY 子句，且 SELECT 中必须包含分组列或聚合函数。
  • 示例：

    SELECT column1, COUNT(column2) FROM table_name GROUP BY column1;
    

4. 结果集区别

• DISTINCT 结果:
  • 返回原始列的唯一组合，不包含额外计算。
  • 输出行数 ≤ 原始数据行数。
• GROUP BY 结果:
  • 返回分组键（如 column1）和聚合值（如 COUNT(column2)）。
  • 输出行数 = 分组键的唯一值数量。

5. 与聚合函数的结合性

• DISTINCT:
  • 不能直接与聚合函数结合（例如 SELECT DISTINCT COUNT(column) 无效）。
  • 如需聚合，需嵌套子查询。
• GROUP BY:
  • 必须与聚合函数一起使用（如 SUM、AVG）。
  • 聚合函数作用于每个分组内部。

6. 使用场景对比

• 适用 DISTINCT 时:
  • 需要简单去重，无统计计算。
  • 示例：列出所有不重复的产品类别。
• 适用 GROUP BY 时:
  • 需要分组统计或汇总分析。
  • 示例：计算每个部门的平均工资。

7. 示例对比（基于示例表Employees）

• DISTINCT 示例：

  SELECT DISTINCT Department FROM Employees;
  

  结果：

  Department
  HR
  IT

• GROUP BY 示例：

  SELECT Department, AVG(Salary) AS AvgSalary FROM Employees GROUP BY Department;
  

  结果：

  Department	AvgSalary
  HR	5250
  IT	6250

8.性能差距比较

在一张百万级的表里，统计 根据指定列 （去重后）的总行数。

-- 测试DISTINCT性能
EXPLAIN SELECT COUNT(DISTINCT column_name) 
FROM table_name 
WHERE conditions;

-- 测试GROUP BY性能
EXPLAIN SELECT COUNT(*) 
FROM (
  SELECT column_name
  FROM table_name
  WHERE conditions
  GROUP BY column_name
) as tmp;

1. 一般情况下的性能表现

DISTINCT通常更好，原因如下：

DISTINCT是专门为去重设计的操作符，数据库优化器对其有专门的优化

语法更简洁，意图更明确

在大多数情况下，DISTINCT的执行效率更高

2. 选择依据条件

• 数据量影响：
  小到中等数据量：DISTINCT性能通常更好
  大数据量：需要考虑索引和具体查询条件
• 重复率影响：
  低重复率（去重后数据量接近原始数据量）：两者性能相近，DISTINCT略优
  高重复率（去重后数据量远小于原始数据量）：DISTINCT优势更明显
• 索引情况：
  如果去重字段有索引，DISTINCT性能更好
  复合索引对两种方法都有帮助

9. 总结

• DISTINCT：简单去重工具，适合返回唯一值列表。
• GROUP BY：分组聚合工具，适合生成统计摘要。
• 关键选择依据：是否需要聚合计算——如果需要，用 GROUP BY；如果仅需去重，用 DISTINCT。

总结

到此这篇关于MYSQL统计总条数(需去重)使用办法的文章就介绍到这了,更多相关MYSQL统计去重总条数内容请搜索脚本之家以前的文章或继续浏览下面的相关文章希望大家以后多多支持脚本之家！

最新评论