mysql 重复数据删除只保留一条

原文链接：https://blog.csdn.net/qq_36608622/article/details/138944740

在MySQL中，删除重复数据并只保留一条记录可以通过几种方法实现，以下是一些常用的方法：

方法一：临时表法

创建临时表：首先创建一个临时表，结构与原表相同。

插入去重数据：使用INSERT INTO ... SELECT语句结合GROUP BY或DISTINCT将去重后的数据插入临时表。

删除原表数据：清空原表数据。

将临时表数据移回原表：将临时表中的数据插入回原表。

清理临时表：最后，如果不需要了，可以删除临时表。

示例SQL（假设表名为ceshi，主键或唯一标识列为id，重复依据列为name, class）:

CREATE TEMPORARY TABLE temp_ceshi AS 

SELECT MIN(id) as id, name, class

FROM ceshi

GROUP BY name, class;

 

DELETE FROM ceshi;

 

INSERT INTO ceshi SELECT * FROM temp_ceshi;

 

DROP TABLE temp_ceshi;

方法二：自连接删除法

直接在原表上操作，通过自连接删除重复项，但需确保你有足够的方式确定哪一行是需要保留的（例如，通过日期、ID或其他唯一条件）。

示例SQL（假设保留每个重复组中ID最小的记录）:

DELETE c1 FROM ceshi c1, ceshi c2

WHERE c1.id > c2.id AND c1.name = c2.name AND c1.class = c2.class;

方法三：窗口函数（如果MySQL版本支持）

对于MySQL 8.0及以上版本，可以使用窗口函数ROW_NUMBER()来标记重复行，然后删除标记为非1（即重复的）行。

WITH CTE AS (

    SELECT *, ROW_NUMBER() OVER(PARTITION BY name, class ORDER BY id) AS rn

    FROM ceshi

)

DELETE FROM ceshi WHERE id IN (SELECT id FROM CTE WHERE rn > 1);

请根据实际情况调整上述SQL语句中的表名、列名以及决定保留哪条记录的逻辑。在执行任何删除操作之前，强烈建议先备份数据，以防数据丢失。