0

0

SQL去重查询怎么实现_真实案例解析强化复杂查询思维【教程】

冰川箭仙

冰川箭仙

发布时间:2025-12-23 22:28:02

|

904人浏览过

|

来源于php中文网

原创

SQL去重核心是DISTINCT与GROUP BY:DISTINCT用于整行或列组合的简单去重,不可控保留任意一条;GROUP BY配合聚合函数或窗口函数可按业务逻辑保留最新、最大等特定记录,支持复杂需求。

sql去重查询怎么实现_真实案例解析强化复杂查询思维【教程】

SQL去重查询核心就两条路:用 DISTINCT 快速筛掉重复行,或用 GROUP BY 配合聚合函数做更灵活的“逻辑去重”。关键不在语法本身,而在你到底想保留哪一条——是任意一条?最新的一条?金额最大的那条?选错方法,结果就偏了。

直接去重:DISTINCT 最快但最“粗暴”

DISTINCT 作用在整行(或指定列组合)上,只要值完全相同,就只留一条。适合真正要“删重记录”的场景,比如查所有不重复的用户城市:

  • SELECT DISTINCT city FROM users;
  • 如果想按多个字段去重(比如同一城市+同一职业只算一次),写成 SELECT DISTINCT city, job_title FROM users;
  • 注意:DISTINCT 不能和普通列、聚合函数混用(除非全用聚合),也无法指定保留哪条重复数据——它内部按排序或存储顺序随机取,不可控。

按条件保留:GROUP BY + 聚合函数才是真功夫

当你要“每个用户只取最新订单”“每类产品只取价格最高的SKU”,就得靠 GROUP BY 搭配 MAX()、MIN()、ROW_NUMBER() 等。这才是业务中高频又易错的点:

  • 查每个用户的最新下单时间:SELECT user_id, MAX(order_time) FROM orders GROUP BY user_id;
  • 但如果你还要同时拿到那条完整订单记录(比如订单号、商品名),就不能只靠 MAX()——得用窗口函数:
    SELECT * FROM (SELECT *, ROW_NUMBER() OVER (PARTITION BY user_id ORDER BY order_time DESC) rn FROM orders) t WHERE rn = 1;
  • 小技巧:GROUP BY 后 SELECT 的非聚合列必须出现在 GROUP BY 子句里(MySQL 5.7+ 默认严格模式下),否则报错或结果不可靠。

去重后还要统计?别漏掉 COUNT(DISTINCT …)

统计“有多少个不同城市”“多少个活跃品类”,不是先 DISTINCT 再 COUNT,而是直接用 COUNT(DISTINCT ...),既简洁又高效:

Jukedeck
Jukedeck

一个由人工智能驱动的音乐创作工具,允许用户为各种项目生成免版税的音乐。

下载
  • SELECT COUNT(DISTINCT city) AS city_count FROM users;
  • 支持多列组合去重计数:COUNT(DISTINCT user_id, product_id) 表示“有多少个不同的用户-商品组合”;
  • 注意 NULL 值会被自动忽略——如果业务要求把 NULL 当作一种有效取值,得额外处理(比如用 COALESCE 转成字符串)。

真实踩坑提醒:NULL 和空字符串不是一回事

很多人以为 DISTINCT 会把 NULL 当成相同值合并——确实会。但空字符串 '' 和 NULL 在 SQL 里是两个完全不同的值,DISTINCT 不会把它们当重复项处理。实际查用户地址时,可能看到一堆 '' 和一堆 NULL 并存,都算“不同”:

  • 查去重后的地址值,得提前清洗:SELECT DISTINCT COALESCE(NULLIF(trim(address), ''), '未知') FROM users;
  • GROUP BY 时同理,NULL 会自成一组,可能影响分组总数,务必结合业务确认是否合理。

基本上就这些。去重看着简单,一到关联多表、带时间范围、要保原始字段,立刻变复杂。关键是先想清楚:“我要去的是什么层面的重?”——是行重、逻辑重,还是统计口径上的重?想清这点,语法只是手到擒来的工具

相关专题

更多
数据分析工具有哪些
数据分析工具有哪些

数据分析工具有Excel、SQL、Python、R、Tableau、Power BI、SAS、SPSS和MATLAB等。详细介绍:1、Excel,具有强大的计算和数据处理功能;2、SQL,可以进行数据查询、过滤、排序、聚合等操作;3、Python,拥有丰富的数据分析库;4、R,拥有丰富的统计分析库和图形库;5、Tableau,提供了直观易用的用户界面等等。

678

2023.10.12

SQL中distinct的用法
SQL中distinct的用法

SQL中distinct的语法是“SELECT DISTINCT column1, column2,...,FROM table_name;”。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

320

2023.10.27

SQL中months_between使用方法
SQL中months_between使用方法

在SQL中,MONTHS_BETWEEN 是一个常见的函数,用于计算两个日期之间的月份差。想了解更多SQL的相关内容,可以阅读本专题下面的文章。

346

2024.02.23

SQL出现5120错误解决方法
SQL出现5120错误解决方法

SQL Server错误5120是由于没有足够的权限来访问或操作指定的数据库或文件引起的。想了解更多sql错误的相关内容,可以阅读本专题下面的文章。

1095

2024.03.06

sql procedure语法错误解决方法
sql procedure语法错误解决方法

sql procedure语法错误解决办法:1、仔细检查错误消息;2、检查语法规则;3、检查括号和引号;4、检查变量和参数;5、检查关键字和函数;6、逐步调试;7、参考文档和示例。想了解更多语法错误的相关内容,可以阅读本专题下面的文章。

357

2024.03.06

oracle数据库运行sql方法
oracle数据库运行sql方法

运行sql步骤包括:打开sql plus工具并连接到数据库。在提示符下输入sql语句。按enter键运行该语句。查看结果,错误消息或退出sql plus。想了解更多oracle数据库的相关内容,可以阅读本专题下面的文章。

675

2024.04.07

sql中where的含义
sql中where的含义

sql中where子句用于从表中过滤数据,它基于指定条件选择特定的行。想了解更多where的相关内容,可以阅读本专题下面的文章。

573

2024.04.29

sql中删除表的语句是什么
sql中删除表的语句是什么

sql中用于删除表的语句是drop table。语法为drop table table_name;该语句将永久删除指定表的表和数据。想了解更多sql的相关内容,可以阅读本专题下面的文章。

415

2024.04.29

java数据库连接教程大全
java数据库连接教程大全

本专题整合了java数据库连接相关教程,阅读专题下面的文章了解更多详细内容。

20

2026.01.15

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
MySQL 教程
MySQL 教程

共48课时 | 1.8万人学习

MySQL 初学入门(mosh老师)
MySQL 初学入门(mosh老师)

共3课时 | 0.3万人学习

简单聊聊mysql8与网络通信
简单聊聊mysql8与网络通信

共1课时 | 793人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号