MySQL 誤操作后如何快速恢復數(shù)據(jù)
瀏覽量:
次 發(fā)布日期:2023-08-20 15:53:39
MySQL 誤操作后如何快速恢復數(shù)據(jù)
(點擊上方公眾號,可快速關注)
來源:danfengcao
my.oschina.net/u/3119184/blog/802700
如有好文章投稿,請點擊 → 這里了解詳情
基本上每個跟
數(shù)據(jù)庫打交道的程序員(當然也可能是你同事)都會碰一個問題,MySQL誤操作后如何快速回滾?比如,delete一張表,忘加限制條件,整張表沒了。假如這還是線上環(huán)境核心業(yè)務數(shù)據(jù),那這事就鬧大了。誤操作后,能快速回滾數(shù)據(jù)是非常重要的。
傳統(tǒng)解法
用全量備份重搭實例,再利用增量binlog備份,恢復到誤操作之前的狀態(tài)。然后跳過誤操作的SQL,再繼續(xù)應用binlog。此法費時費力,不值得再推薦。
利用binlog2sql快速閃回
首先,確認你的My
sql server開啟了binlog,設置了以下參數(shù):
[mysqld]
server-id = 1
log_bin = /var/log/mysql/mysql-bin.log
max_binlog_size = 1000M
binlog-format = row
如果沒有開啟binlog,也沒有預先生成回滾SQL,那真的無法快速恢復數(shù)據(jù)了。對存放重要業(yè)務數(shù)據(jù)的MySQL,強烈建議開啟binlog。
隨后,安裝開源工具binlog2sql。binlog2sql是一款簡單易用的binlog解析工具,其中一個功能就是利用binlog進行閃回。
git clone https://github.com/danfengcao/binlog2sql.git
pip install -r requirements.txt
然后,我們就可以生成回滾SQL了。
背景:誤刪了test庫tbl表整張表的數(shù)據(jù),需要緊急回滾。
test庫tbl表原有數(shù)據(jù)
mysql> select * from tbl;
+----+--------+---------------------+
| id | name | addtime |
+----+--------+---------------------+
| 1 | 小趙 | 2016-12-10 00:04:33 |
| 2 | 小錢 | 2016-12-10 00:04:48 |
| 3 | 小孫 | 2016-12-10 00:04:51 |
| 4 | 小李 | 2016-12-10 00:04:56 |
+----+--------+---------------------+
4 rows in set (0.00 sec)
mysql> delete from tbl;
Query OK, 4 rows affected (0.00 sec)
tbl表被清空
mysql> select * from tbl;
Empty set (0.00 sec)
恢復數(shù)據(jù)步驟:
登錄mysql,查看目前的binlog文件
mysql> show master logs;
+------------------+-----------+
| Log_name | File_size |
+------------------+-----------+
| mysql-bin.000046 | 12262268 |
| mysql-bin.000047 | 3583 |
+------------------+-----------+
最新的binlog文件是mysql-bin.000047,我們再定位誤操作SQL的binlog位置
$ python binlog2sql/binlog2sql.py -h127.0.0.1 -P3306 -uadmin -p'admin' -dtest -ttbl --start-file='mysql-bin.000047'
輸出:
DELETE FROM `test`.`tbl` WHERE `addtime`='2016-12-10 00:04:33' AND `id`=1 AND `name`='小趙' LIMIT 1; #start 3346 end 3556
DELETE FROM `test`.`tbl` WHERE `addtime`='2016-12-10 00:04:48' AND `id`=2 AND `name`='小錢' LIMIT 1; #start 3346 end 3556
DELETE FROM `test`.`tbl` WHERE `addtime`='2016-12-10 00:04:51' AND `id`=3 AND `name`='小孫' LIMIT 1; #start 3346 end 3556
DELETE FROM `test`.`tbl` WHERE `addtime`='2016-12-10 00:04:56' AND `id`=4 AND `name`='小李' LIMIT 1; #start 3346 end 3556
生成回滾sql,并檢查回滾sql是否正確
$ python binlog2sql/binlog2sql.py -h127.0.0.1 -P3306 -uadmin -p'admin' -dtest -ttbl --start-file='mysql-bin.000047' --start-pos=3346 --end-pos=3556 -B
輸出:
INSERT INTO `test`.`tbl`(`addtime`, `id`, `name`) VALUES ('2016-12-10 00:04:56', 4, '小李'); #start 3346 end 3556
INSERT INTO `test`.`tbl`(`addtime`, `id`, `name`) VALUES ('2016-12-10 00:04:51', 3, '小孫'); #start 3346 end 3556
INSERT INTO `test`.`tbl`(`addtime`, `id`, `name`) VALUES ('2016-12-10 00:04:48', 2, '小錢'); #start 3346 end 3556
INSERT INTO `test`.`tbl`(`addtime`, `id`, `name`) VALUES ('2016-12-10 00:04:33', 1, '小趙'); #start 3346 end 3556
確認回滾sql正確,執(zhí)行回滾語句。登錄mysql確認,數(shù)據(jù)回滾成功。
$ python binlog2sql.py -h127.0.0.1 -P3306 -uadmin -p'admin' -dtest -ttbl --start-file='mysql-bin.000047' --start-pos=3346 --end-pos=3556 -B | mysql -h127.0.0.1 -P3306 -uadmin -p'admin'
mysql> select * from tbl;
+----+--------+---------------------+
| id | name | addtime |
+----+--------+---------------------+
| 1 | 小趙 | 2016-12-10 00:04:33 |
| 2 | 小錢 | 2016-12-10 00:04:48 |
| 3 | 小孫 | 2016-12-10 00:04:51 |
| 4 | 小李 | 2016-12-10 00:04:56 |
+----+--------+---------------------+
至此,不用再擔心被炒魷魚了。
有人會問,我DDL誤操作了怎么快速回滾?比如drop了一張大表。
很難做到。因為即使在在row模式下,DDL操作也不會把每行數(shù)據(jù)的變化記錄到binlog,所以DDL無法通過binlog回滾。實現(xiàn)DDL回滾,必須要在執(zhí)行DDL前先備份老數(shù)據(jù)。確實有人通過修改mysql server源碼實現(xiàn)了DDL的快速回滾,我找到阿里的xiaobin lin提交了一個patch。但據(jù)我所知,國內(nèi)很少有互聯(lián)網(wǎng)公司應用了這個特性。原因的話,我認為最主要還是懶的去折騰,沒必要搞這個低頻功能,次要原因是會增加一些額外存儲。
所以,DDL誤操作的話一般只能通過備份來恢復。如果公司連備份也不能用了,那真的建議去買張飛機票了。干啥?跑唄
mysql除了binlog2sql,是否還有其他回滾工具?
當然有。阿里彭立勛對mysqlbinlog增加了flashback的特性,這應該是mysql最早有的flashback功能,彭解決的是DML的回滾,并說明了利用binlog進行DML閃回的設計思路。DDL回滾特性也是由阿里團隊提出并實現(xiàn)的。這兩個功能是有創(chuàng)新精神的,此后出現(xiàn)的閃回工具基本都是對上面兩者的模仿。另外,去哪兒開源的Inception是一套MySQL自動化運維工具,這個就比較重了,支持DML回滾,還不是從binlog回滾的,是從備份回滾的,也支持DDL回滾表結構,數(shù)據(jù)是回滾不了滴~ 還有一種做法叫slave延時備份,搞臺不加業(yè)務流量的slave,故意延遲一段時間,這其實是在傳統(tǒng)辦法的基礎上去除了實例恢復這步。此法會額外消耗一臺機器,我們不推薦這么做。
如有mysql回滾相關的優(yōu)秀工具優(yōu)秀文章遺漏,煩請告知~
我的郵箱 danfengcao.info@gmail.com
看完本文有收獲?請轉(zhuǎn)發(fā)分享給更多人
關注「數(shù)據(jù)庫開發(fā)」,提升 DB 技能
相關推薦