分组取最新记录：小白也能懂的SQL高效去重技巧

当你的数据中有重复记录时，如何快速找到每个分组的最新一条？一个优雅的SQL查询就能解决！

生活中的例子

想象你管理一家网店，同一个订单（order_number）中的同一商品（product）可能有多次更新记录（比如库存变化、价格调整）。你只想查看每个订单商品的最新状态，这时就需要用到"分组取最新记录"的操作。

原理解析：给数据分组并编号

SELECT
  *,
  ROW_NUMBER() OVER (
    PARTITION BY order_number, product, craft, trade_name 
    ORDER BY create_time DESC
  ) AS rn
FROM client_product

这个查询的核心是ROW_NUMBER()函数，它像老师给学生排队一样：

1. 分组（PARTITION BY）：把相同订单+产品+工艺+贸易名称的记录分成一组
2. 排序（ORDER BY）：每组内按创建时间倒序排列（最新时间排第一）
3. 编号（rn）：给每组内的记录标记序号（1,2,3…）

完整查询解析

SELECT *
FROM (
  -- 步骤1：给所有记录标记组内序号
  SELECT *,
    ROW_NUMBER() OVER (
      PARTITION BY order_number, product, craft, trade_name 
      ORDER BY create_time DESC
    ) AS rn
  FROM client_product
  WHERE 
    production_order_number IS NOT NULL  -- 排除生产订单号为空
    AND order_number IS NOT NULL         -- 排除订单号为空
    AND craft != ''                      -- 排除工艺为空
    AND del_flag = '0'                   -- 只取未删除记录
    AND deliver_status != '0'            -- 排除未交付状态
) AS ranked
-- 步骤2：只取每组最新记录
WHERE rn = 1

关键步骤拆解

1. 数据过滤（WHERE）
   只处理有效数据：非空订单号、有生产订单号、工艺不为空、未删除、已交付

2. 分组标记（ROW_NUMBER）

   订单号	产品	创建时间	组内序号(rn)
   A1001	手机壳	2023-01-05	1（最新）
   A1001	手机壳	2023-01-03	2
   B2002	数据线	2023-01-04	1（最新）

3. 筛选结果（WHERE rn=1）
   只保留每组中rn=1的记录，即每个组合的最新数据

实际应用场景

1. 订单管理：获取每个订单的最新状态
2. 设备监控：读取每个传感器的最新读数
3. 用户行为：提取每个用户最近一次登录记录
4. 价格跟踪：查看每个商品的最新定价

性能小贴士

当数据量很大时：

1. 在order_number, product, craft, trade_name上创建索引
2. 在create_time上创建降序索引
3. 定期清理历史数据

总结一句话

这个查询就像给每个分组内的记录按时间倒序排队，然后只取排在第一位的记录

通过这个技巧，你可以轻松地从重复数据中提取最新记录，让数据清洗和分析变得更高效！下次遇到类似需求时，不妨试试这个强大的ROW_NUMBER()函数吧！

（注：实际使用时需根据业务需求调整分组字段和排序规则）