MySQL LOAD DATA 導入大數據全攻略：語法詳解、路徑陷阱、性能優化與實戰技巧

前言：批量導入的「核彈級」武器

LOAD DATA INFILE 是 MySQL 將文本文件高速載入表的核心語句，速度較 INSERT 快 **20 倍以上**（官方數據）。本文系統梳理完整語法、文件路徑解析規則、字段/行分隔符控制、異常處理策略、索引優化技巧與實戰避坑指南，助您駕馭 TB 級數據導入。

一、完整語法結構圖譜

LOAD DATA [LOW_PRIORITY | CONCURRENT] [LOCAL] INFILE 'file_name'
    [REPLACE | IGNORE]
    INTO TABLE tbl_name
    [FIELDS
        [TERMINATED BY 'string']
        [[OPTIONALLY] ENCLOSED BY 'char']
        [ESCAPED BY 'char']
    ]
    [LINES
        [STARTING BY 'string']
        [TERMINATED BY 'string']
    ]
    [IGNORE number LINES]
    [(col_name_or_user_var, ...)]
    [SET col_name = expr, ...]

二、核心子句深度解析

1. LOCAL 關鍵字：客戶端 vs 服務端讀取

關鍵差異：LOCAL 會將文件內容經網絡發送給 Server，傳輸過程不可中斷，故預設行為等同 IGNORE（重複鍵跳過）。

2. 字段與行分隔符控制

-- 標準 CSV：逗號分隔、雙引號包裹、換行結束
FIELDS TERMINATED BY ',' OPTIONALLY ENCLOSED BY '"' ESCAPED BY '\\'
LINES TERMINATED BY '\n'

-- Windows 捷徑（\r\n 換行）
LINES TERMINATED BY '\r\n'

-- 自定義多字符行分隔（如日誌 %% 分隔）
LINES TERMINATED BY '\n%%\n'

• OPTIONALLY ENCLOSED BY：僅字符類型字段加引號；無 OPTIONALLY 則所有字段強制加引號。
• ESCAPED BY：預設反斜槓 \\，空字符意味著不轉義（危險，慎用）。

3. IGNORE number LINES：跳過標題行

LOAD DATA INFILE '/tmp/test.txt' INTO TABLE test IGNORE 1 LINES;

4. REPLACE vs IGNORE：主鍵/唯一鍵衝突策略

5. (col_list) 與 SET：列映射與衍生計算

-- 僅導入指定列，其他列用默認值
LOAD DATA LOCAL INFILE 'persondata.txt' INTO TABLE persondata (col1, col2);

-- 衍生列計算：導入 col3, col4 映射到表 col1, col2，col3 經函數處理
LOAD DATA INFILE 'data.txt' INTO TABLE t1 (col1, col2, @var1)
SET col3 = UPPER(@var1), col4 = NOW();

注意：SET 中只能引用 @user_var，不可前向引用同語句賦值的列。

-- 文件內容：
xxx"row",1
something xxx"row",2

LOAD DATA INFILE '/tmp/test.txt' INTO TABLE test LINES STARTING BY "xxx";
-- 結果：只導入 ("row",1) 和 ("row",2)