SQL 查询重复数据的方法总结

一、查找重复记录

1、使用 COUNT 函数，GROUP BY 子句和 HAVING 子句查找重复记录。

SELECT column1, column2, COUNT(*)
FROM table_name
GROUP BY column1, column2
HAVING COUNT(*) > 1;

2、使用自连接语句查找重复记录。

SELECT DISTINCT a.*
FROM table_name a, table_name b
WHERE a.column1=b.column1
AND a.column2=b.column2
AND a.id!=b.id;

3、使用窗口函数查找重复记录。

SELECT *
FROM (
    SELECT *, ROW_NUMBER() OVER (PARTITION BY column1, column2 ORDER BY id) rn
    FROM table_name
) t
WHERE t.rn > 1;

二、删除重复记录

1、使用 DELETE 和子查询删除重复记录。

DELETE FROM table_name
WHERE id IN (
    SELECT id
    FROM (
        SELECT id, ROW_NUMBER() OVER (PARTITION BY column1, column2 ORDER BY id) rn
        FROM table_name
    ) t
    WHERE t.rn > 1
);

2、使用 ALTER TABLE 添加唯一约束删除重复记录。

ALTER IGNORE TABLE table_name
ADD UNIQUE (column1, column2);

三、避免重复记录的插入

1、使用 INSERT IGNORE 避免重复记录的插入。

 INSERT IGNORE INTO table_name (column1, column2) VALUES (value1, value2); 

2、使用 ON DUPLICATE KEY UPDATE 避免重复记录的插入。

 INSERT INTO table_name (column1, column2) VALUES (value1, value2) ON DUPLICATE KEY UPDATE column1=value1;

四、总结

本文主要介绍了 SQL 查询重复数据的多种方法，包括查找重复记录、删除重复记录、避免重复记录的插入等。需要根据实际情况选择合适的方法来解决重复数据的问题。