监听mysql表内容变化 mysql开启binlog
前言
binlog 就是binary log,二进制日志文件,这个文件记录了mysql所有的增、删、改语句。通过binlog日志我们可以做数据恢复,做主从复制等等。可以看到,只要有了这个binlog,我们就拥有了mysql的完整备份了。
我们时常会碰到这样的需求,就是要监听某个表的变化,然后来做一些操作。
如果该表数据只增加、不删除修改的话,要监听比较简单,可以定时去查询最新的id即可。但要有删除、修改操作的话,免不了就得全表扫描,效率极低。倘若该表发生变化时,能触发个事件之类的可供监听,那最好不过。
现在我们就可以通过binlog来完成了。监听binlog的变化即可,这样每次执行了什么语句都会提现在binlog里,我们就能监听到了。
binlog默认是关闭的,我们要开启它,就需要来修改mysql的配置文件。
mac上brew安装的mysql,默认安装后的目录是/usr/local/Cellar,版本是5.7.21。
可以看到,目录下没有配置文件,这和其他的一些版本可能不一样,别的版本在根目录下会有个my.ini,或者my.cnf文件,或者在support-files里有个my-default.cnf文件,这个版本是没有的。
要修改配置文件,就需要我们自己来创建。
在/etc/目录下创建一个my.cnf文件,内容是
[mysqld] server_id = 1 log-bin = mysql-bin binlog-format = ROW
mysql-bin只是个名字而已,可以随便起。将来保存的日志文件名就是mysql-bin.000001,mysql-bin.000002这样的。
注意 binlog_format 必须设置为 ROW, 因为在 STATEMENT 或 MIXED 模式下, Binlog 只会记录和传输 SQL 语句(以减少日志大小),而不包含具体数据,我们也就无法保存了。
然后通过brew restart mysql重启mysql。再通过mysql -uroot -p命令进入mysql控制台,执行
show variables like '%log_bin%' ;
上面箭头是没有设置my.cnf时的,下面是设置完my.cnf并重启后的。
可以通过show master status
命令查看当前正在写入的binlog日志状态。
还有如下命令:
刷新binlog日志文件 flush logs #刷新之后会新建一个新的binlog日志。
清空日志文件 reset master。
查看第一个binlog文件的内容 show binlog events
。
查看指定binlog文件的内容 show binlog events in 'mysql-bin.000004'
。
获取binlog文件列表 show binary logs
。
只有了binlog,那还是不够的,我们还需要一个监听binlog的工具。下一篇来看canal
总结