數(shù)據(jù)庫備份誰更快？mydumper VS mysqldump 實測對比

在日常運維或者開發(fā)環(huán)境中，數(shù)據(jù)庫備份與恢復(fù)都是繞不開的話題。MySQL 官方自帶的mysqldump工具一直是很多人的首選，但隨著數(shù)據(jù)量的增長，mysqldump在速度和效率上的短板越來越明顯。于是，社區(qū)里出現(xiàn)了性能更強的替代方案——mydumper/myloader。

今天星哥就帶大家做一個實測對比，看看mysqldump 和 mydumper 在備份、恢復(fù)上的速度差距，結(jié)果可能會讓你有點驚訝。

• ?備份工具：mydumpervsmysqldump

• ?恢復(fù)工具：myloadervsmysql

為了保證對比公平，我們在相同環(huán)境下進行了測試：

• ?數(shù)據(jù)庫版本：MySQL 5.7

• ?數(shù)據(jù)量：數(shù)據(jù)庫約 24 萬行，總大小約 20GB

• ?硬件配置：8 核 CPU，32GB 內(nèi)存，SSD 硬盤

• ?工具版本：

• • ? mysqldump：MySQL 官方自帶版本

  • ? mydumper/myloader：v0.19.4

備份星哥玩云的的wordpress數(shù)據(jù)庫，DB總共有24萬條左右的數(shù)據(jù)

img mydumper 備份時間的命令

DB_user='root'  DB_host='X.X.X.X'  DB_port='3306' DB_passwd='12345678'   DB_name='dbname'   DB_backup_pwd='/data/backup/mysql/xgss_mydumper' 計算備份時間 start_time=$(date +%s) mydumper -u $DB_user -h $DB_host -p $DB_passwd  -P $DB_port -B $DB_name  -o $DB_backup_pwd end_time=$(date +%s) echo "備份耗時：$((end_time - start_time)) 秒"

備份耗時：509 秒

du -sh /data/backup/mysql/xgss_mydumper 256M    /data/backup/mysql/xgss_mydumper

將剛才備份的數(shù)據(jù)庫恢復(fù)到本機

start_time=$(date +%s) myloader -u root -p '123456' -h 127.0.0.1 -P 3306 -B www_xgss_net -d /data/backup/mysql/xgss_mydumper end_time=$(date +%s) echo "恢復(fù)耗時：$((end_time - start_time)) 秒"

實際顯示如下：

[root@node8 ~]# start_time=$(date +%s) [root@node8 ~]# myloader -u root  -h 127.0.0.1 -P 61922 -p '123456' -B www_xgss_net -d /data/backup/mysql/xgss_mydumper end_time=$(date +%s) echo "備份耗時：$((end_time - start_time)) 秒" [root@node8 ~]# end_time=$(date +%s) [root@node8 ~]# echo "備份耗時：$((end_time - start_time)) 秒" 備份耗時：3 秒

參數(shù)

作用

-u

/-p/-h/-P

數(shù)據(jù)庫連接信息

-B db01

恢復(fù)到的目標數(shù)據(jù)庫（不存在會自動創(chuàng)建）

備份目錄（mydumper 輸出目錄）

-t 6

恢復(fù)線程數(shù)（可根據(jù) CPU/IO 調(diào)整）

-o

覆蓋已存在的表（DROP 后重建）

-v 3

日志詳細級別（1~3）

恢復(fù)之后查看表

為什么行數(shù)會變多？看看什么原因

img mysqldump 備份時間的命令

DB_user='root'  DB_host='X.X.X.X'  DB_port='3306' DB_passwd='12345678'   DB_name='dbname'   DB_backup_pwd='/data/backup/mysql/xgss_mysqldump' mkdir -p $DB_backup_pwd start_time=$(date +%s) mysqldump -u $DB_user -h $DB_host -P $DB_port -p$DB_passwd  $DB_name > $DB_backup_pwd/$DB_name.sql end_time=$(date +%s) echo "備份耗時：$((end_time - start_time)) 秒"

備份耗時：445 秒

du -sh /data/backup/mysql/xgss_mysqldump 256M    /data/backup/mysql/xgss_mysqldump

恢復(fù)命令

start_time=$(date +%s) mysql -u root -h 127.0.0.1 -P 61922 -p'123456' www_xgss_net2 < /data/backup/mysql/xgss_mysqldump/xgss2.sql end_time=$(date +%s) echo "備份耗時：$((end_time - start_time)) 秒"

備份耗時：22 秒

備份前的數(shù)據(jù)量

mysql> SELECT SUM(table_rows) AS total_rows FROM information_schema.tables WHERE table_schema = 'www_xgss_net'; +------------+ | total_rows | +------------+ | 274473     | +------------+ 1 row in set (0.02 sec)

恢復(fù)之后的數(shù)據(jù)量

mysql> SELECT SUM(table_rows) AS total_rows FROM information_schema.tables WHERE table_schema = 'www_xgss_net'; +------------+ | total_rows | +------------+ | 304427     | +------------+ 1 row in set (0.02 sec) mysql> SELECT SUM(table_rows) AS total_rows FROM information_schema.tables WHERE table_schema = 'www_xgss_net2'; +------------+ | total_rows | +------------+ | 296875     | +------------+ 1 row in set (0.02 sec)

工具

時間

mysql數(shù)據(jù)量

mydumper

509秒

myloader

3秒

mysqldump

445秒

mysql

22秒

通過本次對比測試，我們可以得到一個直觀結(jié)論：

• ?mysqldump/mysql：適合小型數(shù)據(jù)庫、低頻備份場景，工具簡單、穩(wěn)定，但在大數(shù)據(jù)量場景下效率較差。

• ?mydumper/myloader：在大規(guī)模數(shù)據(jù)庫備份/恢復(fù)中優(yōu)勢顯著，支持多線程并行，速度是 mysqldump/mysql 的 4~5 倍，非常適合線上高頻備份和數(shù)據(jù)遷移。