快捷導(dǎo)航

SQL?Server刪除重復(fù)數(shù)據(jù)只保留一條的實(shí)現(xiàn)步驟

更新時(shí)間：2024年01月29日 10:11:42 作者：William_Wei007

在進(jìn)行數(shù)據(jù)處理和數(shù)據(jù)分析的過程中,我們經(jīng)常會(huì)遇到重復(fù)記錄的問題,重復(fù)記錄可能會(huì)導(dǎo)致數(shù)據(jù)不準(zhǔn)確,也會(huì)增加數(shù)據(jù)處理的工作量,這篇文章主要給大家介紹了關(guān)于SQL?Server刪除重復(fù)數(shù)據(jù)只保留一條的實(shí)現(xiàn)步驟,需要的朋友可以參考下

介紹

最近在導(dǎo)入數(shù)據(jù)庫數(shù)據(jù), 有時(shí)候給的數(shù)據(jù)源文件,存在重復(fù)數(shù)據(jù), 需要清除但是還需要保留一條記錄的需求.

本文將介紹如何使用SQL Server來實(shí)現(xiàn)這個(gè)需求。

流程

下面是實(shí)現(xiàn)刪除重復(fù)數(shù)據(jù)的流程，我們可以用表格展示每個(gè)步驟：

步驟描述
步驟一先看看有哪些重復(fù)的數(shù)據(jù)
步驟二根據(jù)條件刪除重復(fù)數(shù)據(jù)

SQL實(shí)現(xiàn)

步驟一：先看看有哪些重復(fù)的數(shù)據(jù)(根據(jù)條件分組)

首先，我們需要查詢出所有重復(fù)數(shù)據(jù)，以便后續(xù)刪除操作。以下是查詢重復(fù)數(shù)據(jù)的代碼：

SELECT col1, col2,  COUNT(*) AS count
FROM table_name
GROUP BY col1, col2
HAVING COUNT(*) > 1;

這段代碼將會(huì)返回具有重復(fù)值的記錄，并且還會(huì)顯示重復(fù)次數(shù)。需要根據(jù)實(shí)際情況將 table_name 替換為你所使用的表名，col1, col2 替換為需要判斷重復(fù)的列。

步驟二：根據(jù)條件刪除重復(fù)數(shù)據(jù)

在查詢出所有重復(fù)數(shù)據(jù)后，我們可以根據(jù)條件刪除這些重復(fù)數(shù)據(jù)，只保留一條。以下是刪除重復(fù)數(shù)據(jù)的代碼：

WITH cte AS (
    SELECT col1, col2, ROW_NUMBER() OVER(PARTITION BY col1, col2  ORDER BY (SELECT 0)) AS rn
    FROM talbe_name
)
DELETE FROM cte
WHERE rn > 1;

這段代碼使用了 ROW_NUMBER() 函數(shù)和一個(gè)公共表表達(dá)式（Common Table Expression，CTE）來為每條記錄分配一個(gè)行號(hào)，并按照指定的列進(jìn)行分組。最后，我們刪除行號(hào)大于1的記錄，即保留第一條記錄，刪除重復(fù)數(shù)據(jù)。

需要注意的是，同樣需要根據(jù)實(shí)際情況將 table_name 替換為你所使用的表名，col1, col2 替換為需要判斷重復(fù)的列。

應(yīng)用實(shí)例

為了更好地理解上述方法，我們將通過一個(gè)實(shí)例來演示如何刪除重復(fù)記錄。

假設(shè)我們有一個(gè)存儲(chǔ)學(xué)生選課信息的表，其中包括學(xué)生姓名、課程名稱和成績(jī)?nèi)齻€(gè)字段。我們的目標(biāo)是刪除重復(fù)的選課記錄，保留每個(gè)學(xué)生在每門課程中的最高成績(jī)。

首先，我們創(chuàng)建一個(gè)示例表，并插入一些數(shù)據(jù)。

CREATE TABLE StudentCourses (
    StudentName varchar(50),
    CourseName varchar(50),
    Grade int
);

INSERT INTO StudentCourses (StudentName, CourseName, Grade)
VALUES ('張三', '數(shù)學(xué)', 85),
       ('張三', '英語', 90),
       ('李四', '數(shù)學(xué)', 95),
       ('李四', '英語', 80),
       ('王五', '數(shù)學(xué)', 90),
       ('王五', '英語', 85);

現(xiàn)在，我們可以使用上述方法之一來刪除重復(fù)記錄。

方法：使用臨時(shí)表

CREATE TABLE #TempTable (
    StudentName varchar(50),
    CourseName varchar(50),
    Grade int
);

INSERT INTO #TempTable (StudentName, CourseName, Grade)
SELECT StudentName, CourseName, Grade
FROM (
    SELECT StudentName, CourseName, Grade,
           ROW_NUMBER() OVER(PARTITION BY StudentName, CourseName ORDER BY Grade DESC) AS RowNum
    FROM StudentCourses
) AS Temp
WHERE RowNum = 1;

TRUNCATE TABLE StudentCourses;

INSERT INTO StudentCourses (StudentName, CourseName, Grade)
SELECT StudentName, CourseName, Grade
FROM #TempTable;

DROP

總結(jié)

到此這篇關(guān)于SQL Server刪除重復(fù)數(shù)據(jù)只保留一條的文章就介紹到這了,更多相關(guān)SQLServer刪除重復(fù)數(shù)據(jù)保留一條內(nèi)容請(qǐng)搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家！

您可能感興趣的文章: