午夜剧场伦理_日本一道高清_国产又黄又硬_91黄色网战_女同久久另类69精品国产_妹妹的朋友在线

您的位置:首頁技術(shù)文章
文章詳情頁

MySQL如何優(yōu)雅的刪除大表實(shí)例詳解

瀏覽:21日期:2023-10-07 13:29:10
前言

刪除表,大家下意識(shí)想到的命令可能是直接使用DROP TABLE '表名',這是初生牛犢的做法,因?yàn)楫?dāng)要?jiǎng)h除的表達(dá)空間到幾十G,甚至是幾百G的表時(shí)候。這樣一條命令下去,MySQL可能就直接夯住了,外在表現(xiàn)就是QPS急速下降,客戶請(qǐng)求變慢。

解決辦法

1.業(yè)務(wù)低峰時(shí)間手動(dòng)執(zhí)行刪除

這個(gè)可能就需要DBA不辭辛勞,大晚上爬起來刪表了。

2.先清除數(shù)據(jù),最后再刪除的方式

譬如1000萬條數(shù)據(jù),寫腳本每次刪除20萬,睡眠一段時(shí)間,繼續(xù)執(zhí)行。這樣也能做到對(duì)用戶無感知。

3.對(duì)表文件(idb文件)做一個(gè)硬鏈接來加速刪除

這個(gè)方法利用了linux下硬鏈接的知識(shí),來進(jìn)行快速刪除,不記得話可以回去翻一下《鳥哥的linux私房菜》

ln data_center_update_log.ibd data_center_update_log.ibd.hdlk[root@mysql01 sports_center]# ll總用量 19903792-rw-r----- 1 mysql mysql 9076 10月 17 13:15 data_center_update_log.frm-rw-r----- 2 mysql mysql 8447328256 12月 23 11:35 data_center_update_log.ibd-rw-r----- 2 mysql mysql 8447328256 12月 23 11:35 data_center_update_log.ibd.hdlk

執(zhí)行上面命令后,我們就多了一個(gè)data_center_update_log.ibd.hdlk文件。此操作實(shí)際上不會(huì)占用磁盤空間,只是增加了一次對(duì)磁盤上文件的引用。

當(dāng)我們刪除其中任何一個(gè)文件時(shí),都不會(huì)影響磁盤上真實(shí)的文件,只是將其引用數(shù)目減去1。當(dāng)被引用的數(shù)目變?yōu)?的時(shí)候,再去刪除文件,才會(huì)真正做IO來刪除它。

正是利用這個(gè)特點(diǎn),將由原來mysql來刪除大文件的操作,轉(zhuǎn)換為一個(gè)簡單的操作系統(tǒng)級(jí)的文件刪除,從而減少了對(duì)mysql的影響。

4.登陸mysql,執(zhí)行drop表操作

很快,200萬條數(shù)據(jù)只用了1秒完成,此操作是在創(chuàng)建硬鏈接后執(zhí)行的

mysql> drop tables data_center_update_log;Query OK, 0 rows affected (1.02 sec)mysql> exitBye退出來,再次查看數(shù)據(jù)目錄,發(fā)現(xiàn)就只剩data_center_update_log.ibd.hdlk硬鏈接文件了[root@mysql01 sports_center]# ll總用量 19903792-rw-r----- 2 mysql mysql 8447328256 12月 23 11:35 data_center_update_log.ibd.hdlk

5.如何正確刪除ibd.hdlk硬鏈接文件呢

雖然drop table之后,剩下的硬鏈接文件已經(jīng)和mysql沒有關(guān)系了。但如果文件過大,直接用rm命令來刪除,也是會(huì)造成IO開銷飆升,CPU負(fù)載過高,進(jìn)而影響到MySQL。 這里我們用到的方法,可以循環(huán)分塊刪除,慢慢地清理文件,通過一個(gè)腳本即可搞定 Truncate命令通常用于將文件縮小或擴(kuò)展到指定的大小。如果文件大于指定的大小,則會(huì)丟失額外的數(shù)據(jù)。如果文件較短,則會(huì)對(duì)其進(jìn)行擴(kuò)展,并且擴(kuò)展部分的讀數(shù)為零字節(jié)。

5.1 安裝truncate命令

[root@mysql01 ~]# cruncate-bash: cruncate: 未找到命令通常操作系統(tǒng)會(huì)安裝truncate命令,該命令在coreutils安裝包里面,如果沒有安裝可以使用下面命令安裝[root@mysql01 ~]# yum provides truncatecoreutils-8.22-24.el7.x86_64 : A set of basic GNU tools commonly used in shell scripts源 :base匹配來源:文件名 :/usr/bin/truncate可以看到truncate由coreutils安裝包提供,下面安裝coreutils安裝包:[root@mysql01 ~]# yum install -y coreutils

5.2 truncate常用選項(xiàng)

-c, --no-create --> 不創(chuàng)建任何文件 -o, --io-blocks --> 將大小視為存儲(chǔ)塊的數(shù)量,而不是字節(jié) -r, --reference=RFILE --> 參考指定的文件大小 -s, --size=SIZE --> 按照指定的字節(jié)設(shè)置文件大小

5.3 truncate_bigfile.sh腳本

原理:使用truncate -s選項(xiàng)可以指定文件大小,通過腳本指定每次文件減少的大小,并sleep睡眠一定時(shí)間,從而達(dá)到可控的刪除文件

附:truncate_bigfile.sh腳本

#! /bin/bash#TRUNCATE=/usr/bin/truncateFILE=$1if [ x'$1' = x ];then echo 'Please input filename in' exit 1;else SIZE_M=$(du -sm '$1' | awk ’{print $1}’) for i in $(seq '${SIZE_M}' -100 0) do sleep 1 echo '${TRUNCATE} -s ${i}M ${FILE}' ${TRUNCATE} -s '${i}'M '${FILE}' donefiif [ $? -eq 0 ];then rm -f '${FILE}'else echo 'Please check file'fi總結(jié)

到此這篇關(guān)于MySQL如何優(yōu)雅的刪除大表的文章就介紹到這了,更多相關(guān)MySQL優(yōu)雅刪除大表內(nèi)容請(qǐng)搜索好吧啦網(wǎng)以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持好吧啦網(wǎng)!

標(biāo)簽: MySQL 數(shù)據(jù)庫
相關(guān)文章:
主站蜘蛛池模板: 欧美亚洲网站 | www久久久久久 | 国产911在线观看 | 激情欧美在线 | a资源在线观看 | 亚洲专区第一页 | 日本天堂网站 | 91网站免费在线观看 | 欧州一区二区 | 96在线观看 | 国产精品毛片久久久久久久av | 亚洲欧美另类一区 | 成人免费在线观看网站 | 日本视频免费在线 | 色小妹av| 一区二区三区黄 | 欧美自拍偷拍第一页 | 日本一区二区在线视频 | 91精品久久香蕉国产线看观看 | 91天天干| 欧洲自拍偷拍 | 插入综合网 | 国产日产欧美一区二区 | 婷婷成人在线 | 国产日韩欧美 | 日本黄色免费看 | 69福利区| 精品福利一区二区 | 欧美日韩一级二级三级 | 日韩中文字幕在线 | 亚洲国产精品一 | 国产精品诱惑 | 99色99| 黄大色黄大片女爽一次 | 91tv国产成人福利 | 国产一区二区三区在线 | 老司机福利精品 | av网站观看 | 在线观看免费高清视频 | 超碰69| 特级黄色大片 |