MySQL去重查询的方法有哪些

在数据库查询中，去重是一个常见的需求。MySQL提供了多种方法来实现去重查询，本文将详细介绍这些方法，并给出相应的示例。

1. 使用DISTINCT关键字

DISTINCT是MySQL中最常用的去重方法。它用于从查询结果中去除重复的行。

语法

SELECT DISTINCT column1, column2, ...
FROM table_name;

示例

假设有一个students表，包含以下数据：

id	name	age
1	Alice	20
2	Bob	21
3	Alice	20
4	Carol	22

要查询所有不重复的name，可以使用以下SQL语句：

SELECT DISTINCT name FROM students;

结果

name
Alice
Bob
Carol

2. 使用GROUP BY子句

GROUP BY子句通常用于分组聚合，但也可以用于去重。

语法

SELECT column1, column2, ...
FROM table_name
GROUP BY column1, column2, ...;

示例

继续使用上面的students表，查询所有不重复的name：

SELECT name FROM students GROUP BY name;

结果

name
Alice
Bob
Carol

3. 使用UNION操作符

UNION操作符用于合并两个或多个SELECT语句的结果集，并自动去除重复的行。

语法

SELECT column1, column2, ...
FROM table1
UNION
SELECT column1, column2, ...
FROM table2;

示例

假设有两个表students1和students2，分别包含以下数据：

students1表：

id	name	age
1	Alice	20
2	Bob	21

students2表：

id	name	age
1	Alice	20
2	Carol	22

要查询两个表中所有不重复的name，可以使用以下SQL语句：

SELECT name FROM students1
UNION
SELECT name FROM students2;

结果

name
Alice
Bob
Carol

4. 使用ROW_NUMBER()窗口函数

ROW_NUMBER()是MySQL 8.0引入的窗口函数，可以为每一行分配一个唯一的行号。通过结合ROW_NUMBER()和WHERE子句，可以实现去重。

语法

SELECT column1, column2, ...
FROM (
    SELECT column1, column2, ...,
           ROW_NUMBER() OVER (PARTITION BY column1, column2, ... ORDER BY column1) AS rn
    FROM table_name
) AS subquery
WHERE rn = 1;

示例

继续使用students表，查询所有不重复的name：

SELECT name
FROM (
    SELECT name, ROW_NUMBER() OVER (PARTITION BY name ORDER BY id) AS rn
    FROM students
) AS subquery
WHERE rn = 1;

结果

name
Alice
Bob
Carol

5. 使用GROUP_CONCAT()函数

GROUP_CONCAT()函数可以将分组后的多个值连接成一个字符串。通过结合GROUP_CONCAT()和SUBSTRING_INDEX()函数，可以实现去重。

语法

SELECT SUBSTRING_INDEX(GROUP_CONCAT(DISTINCT column1 ORDER BY column1 SEPARATOR ','), ',', 1) AS column1
FROM table_name
GROUP BY column1;

示例

继续使用students表，查询所有不重复的name：

SELECT SUBSTRING_INDEX(GROUP_CONCAT(DISTINCT name ORDER BY name SEPARATOR ','), ',', 1) AS name
FROM students
GROUP BY name;

结果

name
Alice
Bob
Carol

6. 使用EXISTS子查询

EXISTS子查询可以用于检查是否存在满足条件的记录。通过结合EXISTS子查询，可以实现去重。

语法

SELECT column1, column2, ...
FROM table_name t1
WHERE NOT EXISTS (
    SELECT 1
    FROM table_name t2
    WHERE t1.column1 = t2.column1
      AND t1.column2 = t2.column2
      AND t1.id < t2.id
);

示例

继续使用students表，查询所有不重复的name：

SELECT name
FROM students t1
WHERE NOT EXISTS (
    SELECT 1
    FROM students t2
    WHERE t1.name = t2.name
      AND t1.id < t2.id
);

结果

name
Alice
Bob
Carol

总结

MySQL提供了多种去重查询的方法，每种方法都有其适用的场景。DISTINCT关键字是最常用的去重方法，适用于简单的去重需求。GROUP BY子句和UNION操作符也可以用于去重，但它们的应用场景有所不同。ROW_NUMBER()窗口函数和GROUP_CONCAT()函数适用于更复杂的去重需求。EXISTS子查询则适用于需要检查重复记录的场景。

根据具体的需求和数据结构，选择合适的方法可以提高查询效率和代码的可读性。