百台 MySQL 節點批量清理過期 Binlog 釋放磁碟空間自動化方案

痛點

• 單機手動 PURGE BINARY LOGS 可行，百台節點逐台操作不現實。
• 需根據從庫同步位置，安全清理主庫已同步的舊 binlog。
• 架構為 M-M 或 M-S 多組，需自動化巡檢清理。

核心思路

1. 維護一份從庫清單 slavelist（每行一個從庫 IP/主機名）。
2. 對每個從庫：遠程執行 SHOW SLAVE STATUS 取得 Master_Log_File（當前同步檔案）與 Master_Host（主庫位址）。
3. 遠程登入對應主庫，執行 PURGE MASTER LOGS TO '檔案名'。
4. Shell 迴圈遍歷所有從庫，完成批量清理。

核心腳本 clean_binlog.sh

#!/bin/bash
# 參數：從庫主機名
SLAVE=$1

# 1. 取得從庫正在同步的主庫 binlog 檔案
MASTER_LOG_FILE=$(ssh $SLAVE "
    mysql -uxx -pxx --ssl-ca=/opt/mysql/ssl/ca-cert.pem \
          --ssl-cert=/opt/mysql/ssl/server-cert.pem \
          --ssl-key=/opt/mysql/ssl/server-key.pem \
          -e 'SHOW SLAVE STATUS\G' | grep -i Master_Log_File | awk '{print \$2}'
")

# 2. 取得主庫主機名/IP
MASTER_HOST=$(ssh $SLAVE "
    mysql -uxx -pxx --ssl-ca=/opt/mysql/ssl/ca-cert.pem \
          --ssl-cert=/opt/mysql/ssl/server-cert.pem \
          --ssl-key=/opt/mysql/ssl/server-key.pem \
          -e 'SHOW SLAVE STATUS\G' | grep -i Master_Host | awk '{print \$2}'
")

# 3. 在主庫執行 PURGE
ssh $MASTER_HOST "
    mysql -uxx -pxx --ssl-ca=/opt/mysql/ssl/ca-cert.pem \
          --ssl-cert=/opt/mysql/ssl/server-cert.pem \
          --ssl-key=/opt/mysql/ssl/server-key.pem \
          -e \"PURGE MASTER LOGS TO '$MASTER_LOG_FILE';\"
"

# 4. 驗證主庫 binlog 目錄磁碟使用
ssh $MASTER_HOST "df -h /mysql/binlog"

批量執行腳本

# slavelist 內容範例：
# db-slave-01
# db-slave-02
# ...

for s in $(cat slavelist); do
    sh clean_binlog.sh $s
done

關鍵細節與避坑指南

進階：Ansible / SaltStack 替代方案

• 用 Ansible mysql_binlog 模組或自定義 task，冪等、並行、可視化報表。
• 結合 Prometheus 監控 mysql_binlog_size_bytes，觸發告警自動執行清理 Playbook。

備份配合

清理前務必確認 binlog 已備份（專用備份機 + 定時 mysqlbinlog --read-from-remote-server 遠程備份），滿足 PITR 需求。