mysql數(shù)據(jù)庫刪除重復(fù)數(shù)據(jù)只保留一條方法實例
1.問題引入
假設(shè)一個場景,一張用戶表,包含3個字段。id,identity_id,name。現(xiàn)在身份證號identity_id和姓名name有很多重復(fù)的數(shù)據(jù),需要刪除只保留一條有效數(shù)據(jù)。
2.模擬環(huán)境
1.登入mysql數(shù)據(jù)庫,創(chuàng)建一個單獨的測試數(shù)據(jù)庫mysql_exercise
create database mysql_exercise charset utf8;
2.創(chuàng)建用戶表users
create table users( id int auto_increment primary key, identity_id varchar(20), name varchar(20) not null );
3.插入測試數(shù)據(jù)
insert into users values(0,'620616199409206512','張三'), (0,'620616199409206512','張三'), (0,'62062619930920651X','李四'), (0,'62062619930920651X','李四'), (0,'620622199101206211','王五'), (0,'620622199101206211','王五'), (0,'322235199909116233','趙六');
可以多執(zhí)行幾次,生成較多重復(fù)數(shù)據(jù)。
4.解決思路
(1)根據(jù)身份證號和name進行分組;
(2)取出分組后的最大id(或最小id);
(3)刪除除最大(或最?。﹊d以外的其他字段;
5.第一次嘗試(失敗!!!)
delete from users where id not in (select max(id) from users group by identity_id,name);
報錯:
1093 (HY000): You can't specify target table 'users' for update in FROM clause
因為在MYSQL里,不能先select一個表的記錄,再按此條件進行更新和刪除同一個表的記錄。
解決辦法是,將select得到的結(jié)果,再通過中間表select一遍,這樣就規(guī)避了錯誤,
這個問題只出現(xiàn)于mysql,mssql和oracle不會出現(xiàn)此問題。
所以我們可以先將括號里面的sql語句先拿出來,先查到最大(或最小)id。
select max_id from (select max(id) as max_id from users group by identity_id,name);
接著,又報錯了?。?!
ERROR 1248 (42000): Every derived table must have its own alias
意思是說:提示說每一個衍生出來的表,必須要有自己的別名!
執(zhí)行子查詢的時候,外層查詢會將內(nèi)層的查詢當做一張表來處理,所以我們需要給內(nèi)層的查詢加上別名
繼續(xù)更正:
給查詢到的最大(或最小id)結(jié)果當做一張新的表,起別名t,并查詢t.mix_id。
select t.max_id from (select max(id) as max_id from users group by identity_id,name) as t;
可以成功查到最大(或最?。﹊d了,如下圖:
6.第二次嘗試(成功!?。。?/strong>
delete from users where id not in ( select t.max_id from (select max(id) as max_id from users group by identity_id,name) as t );
執(zhí)行結(jié)果:
成功將重復(fù)的數(shù)據(jù)刪除,只保留了最后一次增加的記錄。同理也可以保留第一次添加的記錄(即刪除每個分組里面除最小id以外的其他條記錄)
3.知識拓展一:更新數(shù)據(jù)
其他場景應(yīng)用:要將用戶表user_info里名字(name)為空字符串("")的用戶的狀態(tài)(status)改成"0"
update user_info set status='0' where user_id in (select user_id from user_info where name='')
同樣報了如下錯誤:
You can't specify target table ‘user_info' for update in FROM clause
因為在MYSQL里,不能先select一個表的記錄,再按此條件進行更新和刪除同一個表的記錄,解決辦法是,將select得到的結(jié)果,再通過中間表select一遍,這樣就規(guī)避了錯誤。
以下兩種均可?。?!
update user_info set status='0' where user_id in (select user_id from (select user_id from user_info where name = '') t1);
下面這種也可,細微差別,別名可帶as可不帶,t1.user_id 直接和內(nèi)層的user_id對應(yīng)也可以。
update user_info set status='0' where user_id in (select t1.user_id from (select user_id from user_info where name='') as t1);
3.1 分步驟解析
(1)將以下查詢結(jié)果作為中間表:
select user_id from user_info where name='';
(2)再查詢一遍中間表作為結(jié)果集:
select user_id from (select user_id from user_info where name='') as t;
(3)更新數(shù)據(jù)
update user_info set status='0' where user_id in (select user_id from (select user_id from user_info where name='') as t1);
4.拓展練習:刪除重復(fù)數(shù)據(jù)
編寫一個 SQL 查詢,來刪除 Person 表中所有重復(fù)的電子郵箱,重復(fù)的郵箱里只保留 Id 最小 的那個。
+----+------------------+ | Id | Email | +----+------------------+ | 1 | john@example.com | | 2 | bob@example.com | | 3 | john@example.com | +----+------------------+
Id 是這個表的主鍵。
例如,在運行你的查詢語句之后,上面的 Person 表應(yīng)返回以下幾行:
+----+------------------+ | Id | Email | +----+------------------+ | 1 | john@example.com | | 2 | bob@example.com | +----+------------------+
解答一:
delete from Person where Id not in ( select t.min_id from ( select min(Id) as min_id from Person group by Email ) as t );
解答二:
delete p1 from Person as p1,Person as p2 where p1.Email=p2.Email and p1.Id > p2.Id;
總結(jié)
到此這篇關(guān)于mysql數(shù)據(jù)庫刪除重復(fù)數(shù)據(jù)的方法只保留一條的文章就介紹到這了,更多相關(guān)mysql刪除重復(fù)數(shù)據(jù)內(nèi)容請搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家!
相關(guān)文章
CentOS7.x卸載與安裝MySQL5.7的操作過程及編碼格式的修改方法
這篇文章主要介紹了CentOS7.x卸載與安裝MySQL5.7的操作過程及編碼格式的修改方法,本文圖文并茂給大家介紹的非常詳細,具有一定的參考借鑒價值,需要的朋友可以參考下2019-05-05MySQL實現(xiàn)創(chuàng)建存儲過程并循環(huán)添加記錄的方法
這篇文章主要介紹了MySQL實現(xiàn)創(chuàng)建存儲過程并循環(huán)添加記錄的方法,涉及基本的mysql存儲過程創(chuàng)建、調(diào)用相關(guān)操作技巧,需要的朋友可以參考下2017-05-05mysqlreport顯示Com_中change_db占用比例高的問題的解決方法
最近公司的mysql服務(wù)器經(jīng)常出現(xiàn)阻塞狀態(tài)。動不動就重啟,給用戶訪問帶來了相當?shù)牟槐恪?/div> 2009-05-05使用Mycat-eye管理Mycat數(shù)據(jù)庫服務(wù)的操作
MyCat是一個開源的分布式數(shù)據(jù)庫系統(tǒng),是一個實現(xiàn)了MySQL協(xié)議的服務(wù)器,前端用戶可以把它看作是一個數(shù)據(jù)庫代理,用MySQL客戶端工具和命令行訪問,本文給大家介紹了使用Mycat-eye管理Mycat數(shù)據(jù)庫服務(wù)的操作,需要的朋友可以參考下2024-04-04MySQL基礎(chǔ)教程第一篇 mysql5.7.18安裝和連接教程
這篇文章主要為大家詳細介紹了MySQL基礎(chǔ)教程第一篇,mysql5.7.18安裝和連接教程,具有一定的參考價值,感興趣的小伙伴們可以參考一下2017-05-05mysql優(yōu)化之慢查詢分析+explain命令分析+優(yōu)化技巧總結(jié)
這篇文章主要介紹了mysql優(yōu)化之慢查詢分析,explain命令分析,優(yōu)化技巧總結(jié),需要的朋友可以參考下2023-02-02最新評論