一次現(xiàn)場mysql重復(fù)記錄數(shù)據(jù)的排查處理實(shí)戰(zhàn)記錄
前言
我當(dāng)時正好出差在客戶現(xiàn)場部署調(diào)試軟件,有一天客戶突然找到我這里,說他們現(xiàn)場生產(chǎn)的數(shù)據(jù)出現(xiàn)了異常的情況,最直接的表現(xiàn)就是 同一個標(biāo)簽,出現(xiàn)在了多個物料上,需要我配合,看怎么排查問題
分析
客戶當(dāng)時直接一摞重復(fù)標(biāo)簽的盒子碼在我面前,我慌得一匹,這怕不是捅婁子了
稍加思索,現(xiàn)在需要做的就是,在數(shù)據(jù)庫中查詢出重復(fù)的標(biāo)簽,即對一個標(biāo)簽進(jìn)行統(tǒng)計(jì),判斷出計(jì)數(shù)> 1 的即可
emmm,語法錯誤,我記得還有個Having 來著,換上試試
好家伙,重復(fù)的標(biāo)簽有 1500 多條,再統(tǒng)計(jì)一下總共問題的記錄數(shù)量,以及再分組看看標(biāo)簽重復(fù)次數(shù)的占比數(shù)據(jù)
對了,先把這些重復(fù)標(biāo)簽數(shù)據(jù)扔個客戶去追溯產(chǎn)品(幸好 navicat 支持復(fù)制數(shù)據(jù))
數(shù)據(jù)總計(jì)
以上一條查詢記錄的結(jié)果為臨時表,在此基礎(chǔ)上,用 sum() 求和
重復(fù)的記錄有點(diǎn)多,這問題有一點(diǎn)點(diǎn)大了
重復(fù)次數(shù)占比
對之前的查詢表換一個查詢方式,即對 count 數(shù)據(jù)再次分組
從結(jié)果來看,絕大部分問題數(shù)據(jù)重復(fù)了2次
where 和 having 的區(qū)別
Where是一個 約束聲明,在查詢數(shù)據(jù)庫的結(jié)果返回之前對數(shù)據(jù)庫中的查詢條件進(jìn)行約束,即在結(jié)果返回之前起作用,且where后面 不能使用聚合函數(shù)
Having是一個 過濾聲明,所謂過濾是 在查詢數(shù)據(jù)庫的結(jié)果返回之后進(jìn)行過濾,即在結(jié)果返回之后起作用,并且having后面可以使用聚合函數(shù)。
所謂 聚合函數(shù),是對一組值進(jìn)行計(jì)算并且返回單一值的函數(shù):sum---求和,count---計(jì)數(shù),max---最大值,avg---平均值等。
總結(jié)
在 mysql 的查詢操作中,我們?nèi)粘S玫降?,一般都是多表?lián)查,將查詢的結(jié)果當(dāng)成中間表進(jìn)行多次查詢,對查詢的結(jié)果做分組,做統(tǒng)計(jì)匯總等操作
如果查詢操作中使用了函數(shù)計(jì)算或者是分組,典型的特征就是將原始表的多條記錄合并成一條,就需要 having 對這些操作的結(jié)果進(jìn)行過濾,除此之外,使用 where 對表記錄進(jìn)行條件過濾即可
到此這篇關(guān)于現(xiàn)場mysql重復(fù)記錄數(shù)據(jù)的排查處理記錄的文章就介紹到這了,更多相關(guān)mysql重復(fù)記錄數(shù)據(jù)排查處理內(nèi)容請搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家!
相關(guān)文章
mysql for update是鎖表還是鎖行實(shí)例詳解
在并發(fā)一致性控制場景中,我們常常用for update悲觀鎖來進(jìn)行一致性的保證,但是如果不了解它的機(jī)制,就進(jìn)行使用,很容易出現(xiàn)事故,比如for update進(jìn)行了鎖表導(dǎo)致其他請求只能等待,從而拖垮系統(tǒng),這篇文章主要介紹了mysql for update是鎖表還是鎖行操作,需要的朋友可以參考下2024-03-03Mysql5.7及以上版本 ONLY_FULL_GROUP_BY報(bào)錯的解決方法
這篇文章主要介紹了Mysql5.7及以上版本 ONLY_FULL_GROUP_BY報(bào)錯的解決方法,文中通過示例代碼介紹的非常詳細(xì),對大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧2020-03-03MYSQL 高級文本查詢之regexp_like和REGEXP詳解
在MySQL中,regexp_like和REGEXP都是用于執(zhí)行正則表達(dá)式搜索的函數(shù),這篇文章主要介紹了MYSQL 高級文本查詢之regexp_like和REGEXP,需要的朋友可以參考下2023-05-05執(zhí)行sql報(bào)錯only_full_group_by的2種解決方法
這篇文章主要給大家介紹了關(guān)于執(zhí)行sql報(bào)錯only_full_group_by的2種解決方法,報(bào)錯only_full_group_by是?MySQL數(shù)據(jù)庫中的一個錯誤,文中通過代碼將解決的辦法介紹的非常詳細(xì),需要的朋友可以參考下2024-05-05mysql實(shí)現(xiàn)按照某個時間段分組統(tǒng)計(jì)
這篇文章主要介紹了mysql實(shí)現(xiàn)按照某個時間段分組統(tǒng)計(jì)方式,具有很好的參考價(jià)值,希望對大家有所幫助。如有錯誤或未考慮完全的地方,望不吝賜教2022-10-10MySQL關(guān)鍵字Distinct的詳細(xì)介紹
這篇文章主要介紹了MySQL關(guān)鍵字Distinct的詳細(xì)介紹的相關(guān)資料,需要的朋友可以參考下2017-07-07