尝试用binlog恢复mysql数据
Binlog介绍:
- Binlog又称归档日志是专门用来记录逻辑的 (监控并记录你在干啥,比如有没有偷偷删表删库??)
- Binlog位于server层,因此所有的存储引擎都可以使用
- Binlog没有固定大小,会追加写入且不会覆盖旧的Binlog
Binlog开启和配置:
首先我们要检查下我们是否开启了Binlog
输入命令:
show variables like '%bin%';
1,变量log_bin
为 on表示已开启 (如何开启? 直接my.cnf添加log_bin="log_bin_basername"
即可)
2,变量log_bin_basename
为 binlog日志的文件名,还会自动接后缀.00000xx,每次重启mysql服务或者使用flush logs
命令都会生成一个新的binlog文件
3,变量bin_format
则表示日志记录的格式,共有三种格式,分别是statement
,rows
,mixed
,
statement
记录的是sql语句rows
记录的是对数据操作的上下文mixed
则兼容statement
和rows
,会自动根据场景来选择使用前两者的哪一种
一般我们推荐使用mixed
,因为statement
存在隔离限制,如果在"rc/ru" 即 读未提交/读提交的隔离级别下,会产生不可重复读,配置主从后使用statement
格式(因为只是记录sql)进行复制会导致主从数据不一致,而 rows 由于记录的行数据操作的上下文,相比statement
占用空间更大
接着我们先查看一下当前的isolation
输入命令:
show variables like '%isolation%';
ps:5.7+变量名变为`tracsaction_isolation`,我这边是5.6版本的所以还是`tx_isolation`
通过图可以看到,我这边隔离级别为rc,也就是读提交
对照上面讲的,rc 不支持 statement
格式,所以我们要切换格式为rows
或者mixed
可以直接通过global 变量更改,或者直接修改my.cnf,我这里直接修改my.cnf
保存,重启服务,然后重新查看变量binlog_format
,ok,已变更为mixed
建立测试数据并备份:
建立一个test库,然后在test库中建立一个简单的t1表用以测试
CREATE TABLE `t1` ( `id` int(3) NOT NULL AUTO_INCREMENT, `num` int(4) DEFAULT NULL, PRIMARY KEY (`id`) ) ENGINE=InnoDB AUTO_INCREMENT=1 DEFAULT CHARSET=utf8
然后往t1表插入三条数据
insert into t1 (num) values(1),(2),(3);
这样我们测试表和备份数据就完成了,然后用mysqldump进行备份
mysqldump -u -h -p database > /dirs/xxx.sql
接着再插入3条新数据用以测试数据恢复,由于备份中不存在这三条,所以这三条是需要恢复的数据
insert into t1 (num) values(4),(5),(6);
然后我们假装误删表。。。。
drop table t1
准备阶段到此结束~~~
开始恢复数据:
ok,现在开始进入场景,由于我误删了t1表,所以我需要恢复数据(t1应当数据有6条),但备份的数据中只有3条,所以后面插入的那3条记录遗失了,但由于我们配置了binlog,所以后面那3条的数据日志是有被记录的,因此我们只需要用Binlog来恢复那三条数据即可,下面开始数据恢复。
1,先使用备份恢复
我们先把数据恢复到备份状态
mysql -uroot -p -h127.0.0.1 test < /data/mysql/test_backup.sql
恢复成功,检查表中数据
ok,已经恢复到备份状态啦
2,使用Binlog恢复
先查询下当前使用的binlog是哪个文件
show master status;
可以看到使用的是binlog.000001
文件,position累计计数到1615
接着我们先熟悉下mysqlbinlog
的筛选规则
mysqlbinlog --help
如图,我们可以看到mysqlbinlog
命令有4个筛选条件:
start-datetime/stop-datetime 分别表示想要筛选的记录区间的`起始时间`和`截止时间` start-position/stop-position 则表示想要筛选的记录区间的`起始位置`和`截止位置`
我们需要用这几个筛选条件来定位所需要恢复的日志区间
然后我们来瞅一下这个binlog.000001
文件
/*-d参数表示筛选的数据库名称*/ mysqlbinlog -d test /data/mysql/binlog.000001
由于我们使用的隔离限制为rc,mixed
会自动选择rows
格式记录对行的数据操作,所以看不到对应的sql,只能看到对应的上下文
But whatever 直接向下拉,然后我们找到一个重点!
position 699 有一个drop table t1
的操作, 而后面的position 814 和 poistion 939则是恢复备份时的删表建表操作。
因此我们确定了stop-position
就是699
然后我们在找下备份时间,因为我们不好确定start-position
,而不指定开始位置全部恢复又有点太说不过去了。。因此直接查看下备份时间。
ok,这样我们的start-datetime
也确定了, 有了 start-datetime
和 stop-position
,我们就能确定所要恢复的日志区间了
接下来就要用mysqlbinlog 命令开始恢复了
/*这里的 -D 参数表示防止出现新的日志记录,我不想把恢复时添加的数据记录也加到binlog里面*/ mysqlbinlog -d test -D --start-datetime="2019-05-25 09:39:00" --start-position=699 /data/mysql/binlog.000001 | mysql -uroot -p -h127.0.0.1 test
可以看到加了 -D 参数 `position`数目没有发生改变,即没有生成新的日志记录
查询t1表, 发现已经恢复成功了,id 567都恢复进来了
恢复结束
上面的操作是直接通过mysqlbinlog
导入到库中的,当然你也可以选择用mysqlbinlog
生成sql文件,然后再导入sql文件进行恢复,我们再试一下。
先恢复到备份状态(因为-D 参数没有生成新的记录,所以直接start-position = 699
即可)
然后用mysqlbinlog
生成sql
/*没有加-D 参数就是为了测试会不会出现新的日志记录*/ mysqlbinlog -d test --start-datetime="2019-05-25 09:39:00" --stop-position=699 /data/mysql/binlog.000001 > binlog_201905025.sql
生成成功,接着导入sql
mysql -uroot -p -h127.0.0.1 test < /data/mysql/binlog_20190525.sql
ok,发现恢复也成功了
然后查看position
个数
show master status;
果然position
变多啦~
一般建议恢复时添加-D 参数,因为恢复时记录也会被记录到binlog中,相当于重复了。
that's all ~~~
第一次在思否发文章,感觉格式啥不太标准。。见谅。。