mysql備份工具對比

MySQL各種備份工具的速度

大家在備份的時(shí)候可以參考一下浑娜,使用那種比較頂呱呱~

原文博客
https://www.percona.com/blog/dump-performance-comparison-mysqldump-vs-mysql-shell-utilities-vs-mydumper/
老外對比了

  • mysqldump

  • mysql shell instance dump

  • mysqlpump

  • mydumper

  • xtrabackup

    這些工具在備份一個(gè)庫的速度,硬件 128G內(nèi)存,32核CPU抖拦,600GB磁盤,備份的實(shí)例 177 GB匾二。


    image.png

那我們可以觀察到啥呢闷供?

  • mydumper 在使用zstd 這種壓縮方式,快的一比夺荒,這個(gè)壓縮的選項(xiàng)在最近的mydumper才會呢瞒渠,快點(diǎn)去試試吧MyDumper 0.11.3
  • mydumper 在使用gzip這種壓縮方式慢的一比。
  • mysqldump太慢了技扼。

各類工具版本
32 CPUs
128GB Memory
2x NVMe disks 600 GB
Centos 7.9
MySQL 8.0.26
MySQL shell 8.0.26
mydumper 0.11.5 – gzip
mydumper 0.11.5 – zstd
Xtrabackup 8.0.26

備份命令如下

mysqldump
$ time mysqldump --all-databases --max-allowed-packet=4294967295 --single-transaction -R --master-data=2 --flush-logs | gzip > /backup/dump.dmp.gz
mysql shell
$ mysqlsh MySQL JS > shell.connect('root@localhost:3306'); MySQL localhost:3306 ssl test JS > util.dumpInstance("/backup", {ocimds: true, compatibility: ["strip_restricted_grants","ignore_missing_pks"],threads: 16})

mydumper
$ time mydumper --threads=16 --trx-consistency-only --events --routines --triggers --compress --outputdir /backup/ --logfile /backup/log.out --verbose=2
*注意伍玖,你要是想使用zstd 上面的命令你不需要改,你需要下載這個(gè)github.com

mysqlpump
$ time mysqlpump --default-parallelism=16 --all-databases > backup.out

xtrabackup
$ time mysqlpump --default-parallelism=16 --all-databases > backup.out

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末剿吻,一起剝皮案震驚了整個(gè)濱河市窍箍,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌丽旅,老刑警劉巖椰棘,帶你破解...
    沈念sama閱讀 216,372評論 6 498
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場離奇詭異榄笙,居然都是意外死亡晰搀,警方通過查閱死者的電腦和手機(jī),發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 92,368評論 3 392
  • 文/潘曉璐 我一進(jìn)店門办斑,熙熙樓的掌柜王于貴愁眉苦臉地迎上來外恕,“玉大人杆逗,你說我怎么就攤上這事×燮#” “怎么了罪郊?”我有些...
    開封第一講書人閱讀 162,415評論 0 353
  • 文/不壞的土叔 我叫張陵,是天一觀的道長尚洽。 經(jīng)常有香客問我悔橄,道長,這世上最難降的妖魔是什么腺毫? 我笑而不...
    開封第一講書人閱讀 58,157評論 1 292
  • 正文 為了忘掉前任癣疟,我火速辦了婚禮,結(jié)果婚禮上潮酒,老公的妹妹穿的比我還像新娘睛挚。我一直安慰自己,他們只是感情好急黎,可當(dāng)我...
    茶點(diǎn)故事閱讀 67,171評論 6 388
  • 文/花漫 我一把揭開白布扎狱。 她就那樣靜靜地躺著,像睡著了一般勃教。 火紅的嫁衣襯著肌膚如雪淤击。 梳的紋絲不亂的頭發(fā)上,一...
    開封第一講書人閱讀 51,125評論 1 297
  • 那天故源,我揣著相機(jī)與錄音污抬,去河邊找鬼。 笑死绳军,一個(gè)胖子當(dāng)著我的面吹牛壕吹,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播删铃,決...
    沈念sama閱讀 40,028評論 3 417
  • 文/蒼蘭香墨 我猛地睜開眼耳贬,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了猎唁?” 一聲冷哼從身側(cè)響起咒劲,我...
    開封第一講書人閱讀 38,887評論 0 274
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎诫隅,沒想到半個(gè)月后腐魂,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 45,310評論 1 310
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡逐纬,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 37,533評論 2 332
  • 正文 我和宋清朗相戀三年蛔屹,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片豁生。...
    茶點(diǎn)故事閱讀 39,690評論 1 348
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡兔毒,死狀恐怖漫贞,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情育叁,我是刑警寧澤迅脐,帶...
    沈念sama閱讀 35,411評論 5 343
  • 正文 年R本政府宣布,位于F島的核電站豪嗽,受9級特大地震影響谴蔑,放射性物質(zhì)發(fā)生泄漏寻狂。R本人自食惡果不足惜妒潭,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 41,004評論 3 325
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望论悴。 院中可真熱鬧计贰,春花似錦钦睡、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 31,659評論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽刘绣。三九已至樱溉,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間纬凤,已是汗流浹背福贞。 一陣腳步聲響...
    開封第一講書人閱讀 32,812評論 1 268
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留停士,地道東北人挖帘。 一個(gè)月前我還...
    沈念sama閱讀 47,693評論 2 368
  • 正文 我出身青樓,卻偏偏與公主長得像恋技,于是被迫代替她去往敵國和親拇舀。 傳聞我的和親對象是個(gè)殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 44,577評論 2 353

推薦閱讀更多精彩內(nèi)容

  • MySQl日志 Mariadb日志類型: 查詢?nèi)罩荆篻eneral_log 慢查詢?nèi)罩荆簂og_slow_quer...
    Net夜風(fēng)閱讀 897評論 0 1
  • 一蜻底、備份概述 為何要備份 由于機(jī)器故障導(dǎo)致數(shù)據(jù)丟失 主從復(fù)制集群把原始數(shù)據(jù)備份到異地(其他機(jī)房或者其他城市) 由于...
    運(yùn)維開發(fā)_西瓜甜閱讀 2,271評論 0 26
  • 一骄崩、備份概述 為何要備份 由于機(jī)器故障導(dǎo)致數(shù)據(jù)丟失 主從復(fù)制集群把原始數(shù)據(jù)備份到異地(其他機(jī)房或者其他城市) 由于...
    紅衣漫漫閱讀 204評論 0 0
  • MySQL備份功能在實(shí)際應(yīng)用中的重要程度不需要多說,在誤刪重要數(shù)據(jù)后或者數(shù)據(jù)庫被攻擊后薄辅,備份數(shù)據(jù)的作用就突顯出來了...
    Ricky_Wong閱讀 1,752評論 0 0
  • 之前使用 mysqldump 備份的 http://www.reibang.com/p/f34dc0a3c5ce...
    尹楷楷閱讀 327評論 0 3