「查詢變慢」是數據庫最常見症狀,但傳統「Zabbix 監控 + 週報 + Slow Log Top 10」三板斧在高併發、大數據量場景下失效:監控不準、週報不及時、Top 10 被定時任務佔據。本文揭示構建輕量級、實時、可過濾、自動保存現場的慢查詢治理體系的關鍵設計。
| 方案 | 痛點 |
|---|---|
| Zabbix/Prometheus 抓取 | 非內核視角,指標延遲、不準;龐大組件維護成本高 |
| 週級性能統計 | 粒度太粗,故障發生到發現窗口長達 7 天 |
| mysqldumpslow Top 10 | 慢查詢爆發時 Top 10 失去代表性;定時任務佔據名額,業務慢查詢被擠掉 |
-- 動態開啟,閾值 1 秒
SET GLOBAL slow_query_log=ON;
SET GLOBAL long_query_time=1;
SET GLOBAL slow_query_log_file='/var/log/mysql/slow.log';
-- my.cnf 固化
[mysqld]
slow_query_log=1
long_query_time=1
slow_query_log_file=/var/log/mysql/slow.log
採用 pt-query-digest 或自研 Go/Python 解析器,流式處理,不落盤全量日誌,秒級產出指標。
SELECT * FROM t WHERE id=?)。rows_examined > 100万 且 exec_time > 5s → 即時電話/短信rows_examined > 10万 → 工單派單no_index_used=1 → 納入優化待辦SHOW PROCESSLIST、SHOW ENGINE INNODB STATUS、SHOW GLOBAL STATUS 存入對象存儲,事後複盤有據可查。mysqlbinlog 精準定位異常時間窗口。所有上線 SQL 必須通過審計平台:
• 靜態分析:EXPLAIN、索引覆蓋、禁止 SELECT *、禁止隱式轉換
• 動態驗證:預發環境跑真實數據量,收集 rows_examined、exec_time
• 策略引擎:自動拒絕不符合規範的 SQL 發布
| 參數 | 建議值 | 說明 |
|---|---|---|
| long_query_time | 1 (秒) | 核心業務可設 0.5 |
| log_queries_not_using_indexes | ON | 記錄無索引查詢,配合過濾 |
| log_slow_admin_statements | ON | 記錄管理命令(ALTER, ANALYZE 等) |
| log_slow_slave_statements | ON | 從庫慢查詢同樣記錄 |
| slow_query_log_always_write_time | 5 | 超過此秒數必寫入,防止日誌丟失 |
慢查詢治理不是跑腳本,是建系統。輕量級節點監控 + 智能過濾 + 自動現場保存,才是高併發時代的標配。