【sql】MySQL中去重处置处罚的方法

[复制链接]
发表于 2026-1-20 18:33:41 | 显示全部楼层 |阅读模式

马上注册,结交更多好友,享用更多功能,让你轻松玩转社区。

您需要 登录 才可以下载或查看,没有账号?立即注册

×
在MySQL中,去重通常指的是从查询结果中删除重复的行。这可以通过多种方式实现,具体取决于你的需求。以下是一些常见的去重方法:
1. DISTINCT 关键字:

如果你只是想简朴地去重,不关心分组,那么使用 DISTINCT 大概更符合:
使用 DISTINCT 关键字可以返回唯一差别的值。
  1. SELECT DISTINCT name  FROM employees;
复制代码
这个查询会返回全部不重复的员工姓名。
  1.    SELECT DISTINCT column_name FROM table_name;
复制代码
2. GROUP BY 子句:

使用 GROUP BY 子句可以对结果集举行分组,每个组只返回一条记载。
  1. SELECT column_name, COUNT(*)
  2. FROM table_name
  3. GROUP BY column_name;
复制代码
  1. SELECT department_id, name
  2. FROM employees
  3. GROUP BY department_id, name;
复制代码
这个查询会返回每个部门的唯一员工姓名,但请留意,如果部门中有多个人同名,他们都会被列出。
4. 联合 GROUP BY 和 DISTINCT

如果你想先对某个字段举行分组,然后在分组内去重,你可以如许做:
  1. SELECT department_id, DISTINCT name
  2. FROM employees
  3. GROUP BY department_id;
复制代码
但是,这个查询在大多数SQL数据库中是无效的,由于 DISTINCT 应该作用于整个 SELECT 列表,而不是单独的列。
3. 聚合函数:

使用聚合函数(如 MIN(), MAX(), SUM(), AVG() 等)也可以实现去重的结果,由于聚合函数会对每个组返回一个值。
  1. SELECT MIN(column_name) AS unique_column
  2. FROM table_name
  3. GROUP BY another_column;
复制代码
4. 子查询:

使用子查询可以创建一个临时表,此中包罗唯一的记载。
  1. SELECT *
  2. FROM (
  3.     SELECT DISTINCT column_name
  4.     FROM table_name
  5. ) AS subquery;
复制代码
如果你须要在分组后去重,可以使用子查询:
  1. SELECT department_id, MIN(name) AS name
  2. FROM employees
  3. GROUP BY department_id;
复制代码
这个查询会返回每个部门的员工姓名,但每个部门只返回一个名字(这里使用了 MIN() 函数,实际上 MIN() 和 MAX() 在这种用途下结果雷同,由于名字是文本,不是数值)。
5. 临时表:

创建一个临时表来存储去重后的结果。
  1. CREATE TEMPORARY TABLE temp_table AS
  2. SELECT DISTINCT column_name
  3. FROM table_name;
  4. SELECT * FROM temp_table;
  5. DROP TEMPORARY TABLE temp_table;
复制代码
6. 窗口函数(MySQL 8.0+):

使用窗口函数 ROW_NUMBER(), RANK(), DENSE_RANK() 等可以为每个组分配一个唯一的行号。
  1. SELECT column_name
  2. FROM (
  3.     SELECT column_name, ROW_NUMBER() OVER (PARTITION BY column_name ORDER BY another_column) AS rn
  4.     FROM table_name
  5. ) AS subquery
  6. WHERE rn = 1;
复制代码
在支持窗口函数的数据库中,你可以使用 ROW_NUMBER() 或 RANK() 来实现更复杂的去重逻辑:
  1. SELECT department_id, name
  2. FROM (
  3.     SELECT department_id, name,
  4.            ROW_NUMBER() OVER (PARTITION BY department_id ORDER BY name) AS rn
  5.     FROM employees
  6. ) t
  7. WHERE t.rn = 1;
复制代码
这个查询会为每个部门的员工按名字排序,并为每个部门的每个名字分配一个行号。外层查询然后选择每个部门的第一个名字,从而实现去重。
7. 使用 GROUP_CONCAT():

如果你想要将重复的行归并成一个字符串,可以使用 GROUP_CONCAT()。
  1. SELECT column_name, GROUP_CONCAT(another_column SEPARATOR ', ') AS concatenated_values
  2. FROM table_name
  3. GROUP BY column_name;
复制代码
8.使用 DISTINCT ON(MySQL不支持,但实用于其他数据库如PostgreSQL):

在MySQL中没有 DISTINCT ON 语法,但这是其他数据库中去重的一种方法。
选择哪种方法取决于你的具体需求,比如你想要保存哪些列,是否须要思量排序等。在实际应用中,大概须要联合使用多种方法来到达预期的结果。

免责声明:如果侵犯了您的权益,请联系站长,我们会及时删除侵权内容,谢谢合作!qidao123.com:ToB企服之家,中国第一个企服评测及软件市场,开放入驻,技术点评得现金
回复

使用道具 举报

登录后关闭弹窗

登录参与点评抽奖  加入IT实名职场社区
去登录
快速回复 返回顶部 返回列表