快捷導(dǎo)航

mysql去重查詢的三種方法小結(jié)

更新時間：2023年03月28日 16:23:16 作者：小馬穿云

本文主要介紹了mysql去重查詢的三種方法小結(jié)，文中通過示例代碼介紹的非常詳細，對大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價值，需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧

前言

數(shù)據(jù)庫生成環(huán)境中經(jīng)常會遇到表中有重復(fù)的數(shù)據(jù)，或者進行關(guān)聯(lián)過程中產(chǎn)生重復(fù)數(shù)據(jù)，下面介紹三種剔除重復(fù)數(shù)據(jù)的方法，請針對自己的應(yīng)用場景選擇使用。

一、插入測試數(shù)據(jù)

下圖測試數(shù)據(jù)中user_name為lilei、zhaofeng的用戶是重復(fù)數(shù)據(jù)。

二、剔除重復(fù)數(shù)據(jù)方法

1.方法一：使用distinct

代碼如下（示例）：

select distinct user_name,email,address from t_user;

如下圖，已將數(shù)據(jù)剔重，重復(fù)數(shù)據(jù)僅保留1條。

2.方法二：使用group by

SELECT user_name,email,address 
	FROM t_user 
	GROUP BY user_name, email, address;

如下圖，已將數(shù)據(jù)剔重，重復(fù)數(shù)據(jù)僅保留1條。

3.方法三：使用開窗函數(shù)

（1）如果你的數(shù)據(jù)庫是MySQL8以上版本你可以直接使用開窗函數(shù)row_number()

SELECT *
FROM(
    SELECT t.*, 
           ROW_NUMBER() OVER(PARTITION BY user_name
           ORDER BY last_login DESC) rn
    FROM table AS t
	) AS t_user
WHERE rn = 1;

（2）如果你的數(shù)據(jù)庫版本低于MySQL8，使用類row_number()方法

select user_name, email, address 
from (
	select 
		b.*,
		@rownum := @rownum+1 ,-- 定義用戶變量@rownum來記錄數(shù)據(jù)的行號
		if(@pdept=b.user_name,@rank:=@rank+1,@rank:=1) as rank,-- 如果當前分組user_name和上一次分組user_name相同，則@rank（對每一組的數(shù)據(jù)進行編號）值加1，否則表示為新的分組，從1開始
		@pdept:=b.user_name -- 定義變量@pdept用來保存上一次的分組id
	from (select * from t_user) b ,
		(select @rownum :=0 , @pdept := null ,@rank:=0) c  -- 初始化自定義變量值
	order by b.user_name,b.last_login desc -- 該排序必須，否則結(jié)果會不對
) result
where rank = 1;

如下圖，已將數(shù)據(jù)剔重，重復(fù)數(shù)據(jù)僅保留1條。