MySQL 千萬級數據插入優化：批量 INSERT 與 LOAD DATA 實測對比

場景

需導入 2000 萬條記錄，單條 INSERT 仅百條/秒，Hadoop 集群跑也同樣慢。

優化方案一：批量 INSERT（多值語句）

INSERT INTO tbl (c1, c2) VALUES
(v1, v2), (v1, v2), (v1, v2), ...;  -- 每條 500-1000 行，提交一次

效果：速度提升數倍，但仍受限於 SQL 解析、事務提交開銷，約 1-2 萬條/秒。

優化方案二：LOAD DATA 文本導入（極致性能）

# 1. 生成標準文本文件（字段 TAB 分隔，行換行符分隔，NULL 用 \N）
# 2. 客戶端執行
LOAD DATA LOCAL INFILE 'data.txt' INTO TABLE tbl
FIELDS TERMINATED BY '\t' LINES TERMINATED BY '\n';

實測數據（i5-2400 / 8GB RAM / 90MB/s 磁盤）

關鍵參數調優

• bulk_insert_buffer_size（MyISAM） / innodb_buffer_pool_size（InnoDB）適當增大。
• innodb_flush_log_at_trx_commit = 2 導入期間臨時放寬（恢復後改回 1）。
• unique_checks=0、foreign_key_checks=0 導入期間關閉約束檢查。

超大文件（11GB+）建議

分片並行導入、或使用 xtrabackup --import 物理導入、或分庫分表架構。

1. 上一篇文章： MySQL 免安裝版註冊 Windows 服務命令
2. 下一篇文章： MySQL 快速查看表信息：information_schema.TABLES 秒級獲取行數、大小、引擎

MySQL 綜合教學

MySQL 學習筆記（一）：語法差異、DDL 操作對比、自增主鍵、外鍵約束與多表刪除

前言 公司同時使用 SQL Server 與 MySQL，管

MySQL 5.7.14 常見連線問題排查指南

MySQL 5.7.14 常見連線問題排查指南 使用 Nav

MySQL 5.5 修改默認字符集為 UTF-8：圖文步驟詳解

MySQL 默認字符集為 latin1，不支持中文，存儲中文

深入解析 InnoDB 事務隔離級別對 MySQL 效能的影響

前言 在 MySQL 中，InnoDB 儲存引擎透過多版本並