sql去除重复记录有5种常用方法：distinct关键字，返回查询结果中的唯一记录；group by子句，分组并仅返回每个组中不重复的记录；union all和distinct，合并多个查询结果并去除重复记录；not in子查询，从一个表中去除与另一个表中重复的记录；cte（公共表表达式），使用 row_number() 函数分配唯一序号来去除重复记录。
SQL 中去除重复记录的方法
在 SQL 中去除重复记录是一种常见需求，可以提高数据质量和性能。这里介绍几种常用的方法：
1. DISTINCT 关键字
DISTINCT 关键字用于返回查询结果中的唯一（不重复）记录。它可以与其他关键字一起使用，例如 SELECT、FROM 和 WHERE。
SELECT DISTINCT column_name FROM table_name;
2. GROUP BY 子句
GROUP BY 子句将查询结果分组，并仅返回每个组中不重复的记录。可以结合聚合函数（例如 COUNT、SUM）使用。
SELECT column_name, COUNT(*) AS count FROM table_name GROUP BY column_name;
3. UNION ALL 和 DISTINCT
UNION ALL 运算符将多个查询结果合并为一个结果集。结合 DISTINCT 可以去除重复记录。
SELECT * FROM table_name UNION ALL SELECT * FROM table_name2 DISTINCT;
4. NOT IN 子查询
NOT IN 子查询可以从一个表中去除与另一个表中记录重复的记录。
SELECT * FROM table_name WHERE column_name NOT IN (SELECT column_name FROM other_table);
5. CTE（公共表表达式）
CTE 是一种临时表，可以在查询中多次引用。可以使用 ROW_NUMBER() 函数为每一行分配一个唯一序号，然后使用它来去除重复记录。
WITH RankedData AS (
SELECT *, ROW_NUMBER() OVER (PARTITION BY column_name ORDER BY id) AS row_num
FROM table_name
)
SELECT * FROM RankedData
WHERE row_num = 1;选择合适的方法
选择哪种方法取决于数据集和查询的具体要求。对于较小的数据集，DISTINCT 关键字或 GROUP BY 子句通常就足够了。对于较大的数据集，CTE 或 NOT IN 子查询可能更有效。
以上就是sql重复记录怎么去掉的详细内容，更多请关注CTO智库其它相关文章！