SQL Server 刪除完全重複記錄保留首條：SELECT INTO 臨時表去重法

遇到表中存在完全一模一樣的重複行（無主鍵、無唯一約束），需刪除重複僅保留第一條。本文提供經典 SELECT INTO #Temp 去重方案，並說明 SELECT INTO 權限開啟方法。

標準去重腳本

-- 1. 將去重後數據導入臨時表
SELECT DISTINCT * INTO #TmpTable FROM SourceTable;

-- 2. 清空原表
DELETE FROM SourceTable;

-- 3. 將去重數據寫回原表
SELECT * INTO SourceTable FROM #TmpTable;

-- 4. 刪除臨時表
DROP TABLE #TmpTable;

關鍵前置條件：啟用 SELECT INTO

SQL Server 默認關閉 SELECT INTO，執行上述腳本會報錯。兩種開啟方式：

方式一：企業管理器圖形化

1. 右鍵資料庫 → 「屬性」 → 「選項」頁籤。
2. 勾選「允許 SELECT INTO/大容量複製」。
3. 確定，無需重啟服務。

方式二：T-SQL 命令（推薦腳本化）

EXEC sp_dboption 'DatabaseName', 'select into', 'true';

執行後立即生效，無需重啟。

進階場景：保留特定業務邏輯的「首條」

若「首條」定義為按某字段排序第一條（如最早創建時間），而非物理存儲順序：

;WITH CTE AS (
    SELECT *, 
           ROW_NUMBER() OVER (PARTITION BY Col1, Col2, Col3 ORDER BY CreateTime ASC) AS RN
    FROM SourceTable
)
DELETE FROM SourceTable
WHERE EXISTS (
    SELECT 1 FROM CTE 
    WHERE CTE.Col1 = SourceTable.Col1 
      AND CTE.Col2 = SourceTable.Col2 
      AND CTE.Col3 = SourceTable.Col3 
      AND CTE.RN > 1
);

• PARTITION BY 列出構成「重複」判定的所有業務列。
• ORDER BY 定義保留哪一條（如最早/最新/ID 最小）。
• 適用於 SQL Server 2005+，無需臨時表，單語句原子操作。

性能與鎖定提示

大表分批刪除模板（避免日誌爆漲、長時間鎖表）

DECLARE @BatchSize INT = 5000, @RowCount INT = 1;
WHILE @RowCount > 0
BEGIN
    DELETE TOP (@BatchSize) FROM SourceTable
    WHERE EXISTS (
        SELECT 1 FROM (
            SELECT *, ROW_NUMBER() OVER (PARTITION BY Col1,Col2,Col3 ORDER BY ID) AS RN
            FROM SourceTable
        ) T WHERE T.RN > 1 AND T.ID = SourceTable.ID
    );
    SET @RowCount = @@ROWCOUNT;
    WAITFOR DELAY '00:00:00.100';  -- 釋放鎖喘息
    CHECKPOINT;  -- 簡單恢復模式下截斷日誌
END

總結

「完全重複行去重」核心在於 DISTINCT 投影 + 物理重建。現代環境首選 ROW_NUMBER() 窗口函數單語句解決，兼具性能、並發與語義精確性。老版本或臨時一次性任務可用 SELECT INTO #Temp，但記得先 sp_dboption 'select into', 'true'。生產大表務必分批、監控日誌空間、預留回滾方案。

1. 上一篇文章： 模糊數據庫理論與實踐：從隸屬函數到 ORDBMS 存儲模型選型
2. 下一篇文章： SQL 語句性能調優核心原則：WHERE 子句寫法決定索引成敗

MySQL 資料庫相關知識

MySQL 二進制日志恢復數據庫實戰：基於時間點與位點的精準恢復操作手冊

Binlog 核心作用 記錄所有**數據變更** (DDL

MySQL FROM 子查詢與 EXISTS/NOT EXISTS 實戰指南：衍生表、半連接與效能優化

前言 FROM 子查詢（衍生表）與 EXISTS/NOT E

MySQL 註釋語法全解：三種風格與版本特性

MySQL SQL 註釋三種風格、特殊語法與版本演進 良好的

MySQL LIKE 模糊查詢全攻略：通配符、大小寫、中文編碼、索引效能與 PHP 實戰

前言 LIKE 是 SQL 模糊比對的核心運算子，配合通配符