欧美bbbwbbbw肥妇,免费乱码人妻系列日韩,一级黄片

MySQL中的多字段相同數(shù)據(jù)去重復(fù)

 更新時間：2022年12月21日 15:59:29   作者：嗨皮螃  
這篇文章主要介紹了MySQL中的多字段相同數(shù)據(jù)去重復(fù)問題，具有很好的參考價值，希望對大家有所幫助。如有錯誤或未考慮完全的地方，望不吝賜教

MySQL多字段相同數(shù)據(jù)去重復(fù)

MySQL多字段去重復(fù)實際上是單字段去重復(fù)的衍生，原理就是把多字段數(shù)據(jù)通過子查詢合并為單字段的數(shù)據(jù)表，再通過單字段數(shù)據(jù)group by 進行匯總，用 having把 count(字段) > 1的數(shù)據(jù)都顯示出來，最后把查找到的重復(fù)數(shù)據(jù) 用min方法或者max方法獲取最小id或者最大id來選擇刪除。

1、多字段轉(zhuǎn)單字段

這里需要把id顯示出來，后面有用到

SELECT id,CONCAT(`host`,path,params) AS uuid FROM static_url

2、把多字段合并為單字段

的查詢結(jié)果放入子查詢，查找存在重復(fù)的數(shù)據(jù)，并顯示重復(fù)數(shù)

SELECT COUNT(a.id),a.uuid FROM (
? ? SELECT id,CONCAT(`host`,path,params) AS uuid FROM static_url
) a GROUP BY a.uuid HAVING COUNT(a.id) > 1

3、將查詢到的重復(fù)id

來獲取重復(fù)數(shù)據(jù)里最小的id

SELECT min(a.id) FROM (

? ? ?SELECT id,CONCAT(`host`,path,params) AS uuid FROM static_url

) a GROUP BY a.uuid HAVING COUNT(a.id) > 1

4、將獲取到重復(fù)數(shù)據(jù)最小的id值

放入 IN內(nèi)作為刪除數(shù)據(jù)的條件

DELETE FROM static_url WHERE id IN(

? ? SELECT min(a.id) FROM (

? ? ? ? SELECT id,CONCAT(`host`,path,params) AS uuid FROM static_url

? ? ) a GROUP BY a.uuid HAVING COUNT(a.id) > 1

)

5、bug補充

如果直接執(zhí)行步驟4的代碼時，MySQL會卡住，會卡住，卡住，??！

雖然邏輯上來說沒問題，但執(zhí)行的時候嵌套過多子查詢，就會出現(xiàn)問題，所以要把子查詢數(shù)據(jù)拎出來再放入刪除語句內(nèi)

DELETE FROM static_url WHERE id IN(

? ?91383,26240,26256,26269,26129,26108,26029,26067,26095,26309,26595,51805,37459,32493,32417

)

6、將步驟4的代碼多執(zhí)行幾次

直到執(zhí)行結(jié)果顯示沒有刪除到數(shù)據(jù)的時候才停止，因為重復(fù)數(shù)據(jù)不一定只重復(fù)一次，很可能重復(fù)好幾次，每一次執(zhí)行只能刪除重復(fù)數(shù)據(jù)的最小id，不是只保留最大id  

總結(jié)

以上為個人經(jīng)驗，希望能給大家一個參考，也希望大家多多支持腳本之家。

相關(guān)文章

最新評論