基于 MyFlash 的 MySQL 数据恢复

拟墨画扇 提交于 2019-11-27 03:28:41

以前mysql回复误删数据用的比较多的是基于原始binlog或binlog2sql,昨天又遇到一例开发误删的问题,这次用用美团开源的工具 MyFlash试试。用下来效果还是不错的,基于库 or 表的过滤可以有效的筛选出来目标sql。

#### 项目地址

https://github.com/Meituan-Dianping/MyFlash/

 

####实现原理

https://mp.weixin.qq.com/s?__biz=MjM5NjQ5MTI5OA==&mid=2651747096&idx=1&sn=e561ce9254f69c3fcd04c73b44e56e69&chksm=bd12aa558a65234332298e1d611da408ec45afb2d08ecd22078a600379525e75b2fa13149fb0&mpshare=1&scene=23&srcid=1116o1gBWoNf47Rv1E1ngYir#rd

####限制

         1. binlog格式必须为row,且binlog_row_image=full

         2. 仅支持5.6与5.7

         3. 只能回滚DML(增、删、改)

 

####安装

         cd /opt

         git clone https://github.com/Meituan-Dianping/MyFlash.git

         yum install libgnomeui-devel -y

         cd /opt/flashback/MyFlash/binary

         gcc -w  `pkg-config --cflags --libs glib-2.0` source/binlogParseGlib.c  -o binary/flashback

 

####参数介绍

         下面的这些参数是可以任意组合的。

         1.databaseNames

         指定需要回滚的数据库名。多个数据库可以用“,”隔开。如果不指定该参数,相当于指定了所有数据库。

         2.tableNames

         指定需要回滚的表名。多个表可以用“,”隔开。如果不指定该参数,相当于指定了所有表。

         3.start-position

         指定回滚开始的位置。如不指定,从文件的开始处回滚。请指定正确的有效的位置,否则无法回滚

         4.stop-position

         指定回滚结束的位置。如不指定,回滚到文件结尾。请指定正确的有效的位置,否则无法回滚

         5.start-datetime

         指定回滚的开始时间。注意格式必须是 %Y-%m-%d %H:%M:%S。 如不指定,则不限定时间

         6.stop-datetime

         指定回滚的结束时间。注意格式必须是 %Y-%m-%d %H:%M:%S。 如不指定,则不限定时间

         7.sqlTypes

         指定需要回滚的sql类型。目前支持的过滤类型是INSERT, UPDATE ,DELETE。多个类型可以用“,”隔开。

         8.maxSplitSize

         一旦指定该参数,对文件进行固定尺寸的分割(单位为M),过滤条件有效,但不进行回滚操作。该参数主要用来将大的binlog文件切割,防止单次应用的binlog尺寸过大,对线上造成压力

         9.binlogFileNames

         指定需要回滚的binlog文件,目前只支持单个文件,后续会增加多个文件支持

         10.outBinlogFileNameBase

         指定输出的binlog文件前缀,如不指定,则默认为binlog_output_base.flashback

         11.logLevel

         仅供开发者使用,默认级别为error级别。在生产环境中不要修改这个级别,否则输出过多

         12.include-gtids

         指定需要回滚的gtid,支持gtid的单个和范围两种形式。

         13.exclude-gtids

         指定不需要回滚的gtid,用法同include-gtids

 

#### 回滚(普通文件)

         1.打捞

         测试发现不指定 --stop-position=601671361 效果相同

         ./flashback --binlogFileNames=/data0/mysql/3308_mofang/mysql-bin.000608 --start-position=600264778   --sqlTypes='DELETE' --databaseNames=report_forms --tableNames=t_sys_report_cache --outBinlogFileNameBase=mysql-bin.000608.flash  

          

         2.查看数据

         mysqlbinlog --base64-output="decode-rows" mysql-bin.000608.flash.flashback  -vvv 

 

         3.恢复

         mysqlbinlog mysql-bin.000608.flash.flashback |mysql -uroot -p'123' -S /tmp/mysql_5555.sock

        

####回滚(大文件)

         回滚

         ./flashback --binlogFileNames=haha.000042

         切割大文件

         ./flashback --maxSplitSize=1 --binlogFileNames=binlog_output_base.flashback

         应用

         mysqlbinlog binlog_output_base.flashback.000001 | mysql -h<host> -u<user> -p

         ...

         mysqlbinlog binlog_output_base.flashback.<N> | mysql -h<host> -u<user> -p

 

        

        

标签
易学教程内所有资源均来自网络或用户发布的内容,如有违反法律规定的内容欢迎反馈
该文章没有解决你所遇到的问题?点击提问,说说你的问题,让更多的人一起探讨吧!