操作的复原措施,主要依然经过binlog来进展苏醒

前言:
      
操作数据库时候难免会因为“马虎”而误操作,要求神速还原的话通过备份来回复是不太或者的,因为急需还原和binlog差来平复,等不止,很劳苦。那里先验证下因为Delete
操作的过来措施:主要依旧通过binlog来进展复原,前提是binlog_format必须是Row格式,否则只好通过备份来还原数据了。
方法:
     条件:开启Binlog,Format为Row。
     步骤:
1.透过MySQL自带工具mysqlbinlog 内定导出操作的笔录:

前言:
      
操作数据库时候难免会因为“大意”而误操作,必要快速苏醒的话通过备份来还原是不太或然的,因为急需还原和binlog差来回复,等不止,很为难。那里先表达下因为Delete
操作的復苏措施:主要还是通过binlog来进行还原,前提是binlog_format必须是Row格式,否则只好通过备份来复苏数据了。
方法:
     条件:开启Binlog,Format为Row。
     步骤:
1.通过MySQL自带工具mysqlbinlog 钦命导出操作的笔录:

mysqlbinlog --no-defaults --start-datetime='2017-03-16 14:56:00' --stop-datetime='2017-03-16 14:57:00' -vv mysql-bin.000001 > /tmp/restore/binlog.txt
mysqlbinlog --no-defaults --start-datetime='2017-03-16 14:56:00' --stop-datetime='2017-03-16 14:57:00' -vv mysql-bin.000001 > /tmp/restore/binlog.txt

2.数据取出来将来,需求把数量解析反转,原始数据:

2.数据取出来之后,须要把数量解析反转,原始数据:

### DELETE FROM test.me_info
### WHERE
###   @1=2165974 /* INT meta=0 nullable=0 is_null=0 */
###   @2='1984:03:17' /* DATE meta=0 nullable=1 is_null=0 */
###   @3=NULL /* DATE meta=765 nullable=1 is_null=1 */
###   @4=2017-03-16 00:00:00 /* DATETIME meta=0 nullable=0 is_null=0 */
###   @5='' /* VARSTRING(765) meta=765 nullable=1 is_null=0 */
###   @6=0 /* TINYINT meta=0 nullable=1 is_null=0 */
###   @7='' /* VARSTRING(765) meta=765 nullable=1 is_null=0 */
###   @8=-1 (4294967295) /* INT meta=0 nullable=1 is_null=0 */
###   @9=0 /* MEDIUMINT meta=0 nullable=1 is_null=0 */
###   @10=NULL /* MEDIUMINT meta=0 nullable=1 is_null=1 */
###   @11=2 /* TINYINT meta=0 nullable=1 is_null=0 */
###   @12=0 /* TINYINT meta=0 nullable=1 is_null=0 */
###   @13='' /* VARSTRING(765) meta=765 nullable=1 is_null=0 */
###   @14='' /* VARSTRING(765) meta=765 nullable=1 is_null=0 */
###   @15=0 /* MEDIUMINT meta=0 nullable=1 is_null=0 */
###   @16=320 /* INT meta=0 nullable=1 is_null=0 */
……………………
……………………
……………………
### DELETE FROM test.me_info
### WHERE
###   @1=2165974 /* INT meta=0 nullable=0 is_null=0 */
###   @2='1984:03:17' /* DATE meta=0 nullable=1 is_null=0 */
###   @3=NULL /* DATE meta=765 nullable=1 is_null=1 */
###   @4=2017-03-16 00:00:00 /* DATETIME meta=0 nullable=0 is_null=0 */
###   @5='' /* VARSTRING(765) meta=765 nullable=1 is_null=0 */
###   @6=0 /* TINYINT meta=0 nullable=1 is_null=0 */
###   @7='' /* VARSTRING(765) meta=765 nullable=1 is_null=0 */
###   @8=-1 (4294967295) /* INT meta=0 nullable=1 is_null=0 */
###   @9=0 /* MEDIUMINT meta=0 nullable=1 is_null=0 */
###   @10=NULL /* MEDIUMINT meta=0 nullable=1 is_null=1 */
###   @11=2 /* TINYINT meta=0 nullable=1 is_null=0 */
###   @12=0 /* TINYINT meta=0 nullable=1 is_null=0 */
###   @13='' /* VARSTRING(765) meta=765 nullable=1 is_null=0 */
###   @14='' /* VARSTRING(765) meta=765 nullable=1 is_null=0 */
###   @15=0 /* MEDIUMINT meta=0 nullable=1 is_null=0 */
###   @16=320 /* INT meta=0 nullable=1 is_null=0 */
……………………
……………………
……………………

Row格式的binlog记录的格式如上面所示,需求做的行事就是吧Delete的操作转换到Insert操作,发下面的都是有必然规律的,并且要求小心的是:

Row格式的binlog记录的格式如上面所示,要求做的办事就是吧Delete的操作转换到Insert操作,发上边的都以有肯定规律的,并且需求留意的是:

壹 、字段类型 DATETIME 日期。在日记中保存的格式为 @4=2017-03-16
00:00:00,须求将2017-03-16 00:00:00增进引号。

① 、字段类型 DATETIME 日期。在日记中保留的格式为 @4=2017-03-16
00:00:00,须要将2017-03-16 00:00:00加上引号。

② 、负数。在日记中保存的格式为 @1=-1 (4294967295),
-2(4294967294),-3(4294967293),要求将括号里面的数额去掉,只保留@1=-1。

贰 、负数。在日记中保留的格式为 @1=-1 (4294967295),
-2(4294967294),-3(4294967293),须要将括号里面的数额去掉,只保留@1=-1。

叁 、转义字符集。如:’s,\,等。
地方3点清楚之后,可以写2个剧本(水平有限,在升级中,写的不好看):

③ 、转义字符集。如:’s,\,等。
地点3点清楚之后,可以写一个剧本(水平有限,在晋级中,写的糟糕看):

图片 1图片 2

图片 3图片 4

#!/bin/env python
# -*- encoding: utf-8 -*-
#-------------------------------------------------------------------------------
# Name:        restore_insert.py
# Purpose:     通过Binlog恢复Delete误操作数据
#-------------------------------------------------------------------------------
def read_binlog(file,column_num):
    f=open(file)
    num = '@'+str(column_num)
    while True:
        lines = f.readline()
        if lines.strip()[0:3] == '###':
            lines=lines.split(' ',3)
            if lines[1] == 'DELETE' and lines[2] =='FROM':           #该部分替换Delete为Insert
                lines[1] = "INSERT"
                lines[2] = 'INTO'
                lines[-1] = lines[-1].strip()
            if lines[1].strip() == 'WHERE':
                lines[1] = 'VALUES ('
            if  ''.join(lines).find('@') <> -1 and lines[3].split('=',1)[0] <> num:          #num为列数,要是小于最大的列数,后面均加,
                lines[3] = lines[3].split('=',1)[-1].strip()
                if lines[3].strip('\'').strip().find('\'') <> -1:
                    lines[3] = lines[3].split('/*')[0].strip('\'').strip().strip('\'').replace('\\','\\\\').replace('\'','\\\'')  #这里过滤掉转义的字符串
                    lines[3] = '\'' + lines[3] + '\','
                elif lines[3].find('INT meta') <> -1:                #过滤Int类型的字段为负数后带的(),正数不受影响
                    lines[3] = lines[3].split('/*')[0].strip()
                    lines[3] = lines[3].split()[0] + ','
                elif lines[3].find('NULL') <> -1:
                    lines[3] = lines[3].split('/*')[0].strip()
                    lines[3] = lines[3] + ','
                else:
                    lines[3] = lines[3].split('/*')[0].strip('\'').strip().strip('\'').replace('\\','\\\\').replace('\'','\\\'')  #这里过滤掉转义的字符串
                    lines[3] = '\'' + lines[3].strip('\''' ') + '\','
            if  ''.join(lines).find('@') <> -1 and lines[3].split('=',1)[0] == num:          #num为列数,要是小于最大的列数,后面均加);
                lines[3] = lines[3].split('=',1)[-1].strip()
                if lines[3].find('\'') <> -1: 
                    lines[3] = lines[3].split('/*')[0].strip('\'').strip().strip('\'').replace('\\','\\\\').replace('\'','\\\'')  #同上
                    lines[3] = '\'' + lines[3] + '\');'
                elif lines[3].find('INT meta') <> -1:                #同上
                    lines[3] = lines[3].split('/*')[0].strip()
                    lines[3] = lines[3].split(' ')[0] + ');'
                elif lines[3].find('NULL') <> -1:
                    lines[3] = lines[3].split('/*')[0].strip()
                    lines[3] = lines[3] + ');'
                else:
                    lines[3] = lines[3].split('/*')[0].strip('\'').strip().strip('\'').replace('\\','\\\\').replace('\'','\\\'')  #同上
                    lines[3] = '\'' + lines[3].strip('\''' ') + '\');'
            print ' '.join(lines[1:])
        if lines == '':
            break
if __name__ == '__main__':
    import sys
    read_binlog(sys.argv[1],sys.argv[2])
#!/bin/env python
# -*- encoding: utf-8 -*-
#-------------------------------------------------------------------------------
# Name:        restore_insert.py
# Purpose:     通过Binlog恢复Delete误操作数据
#-------------------------------------------------------------------------------
def read_binlog(file,column_num):
    f=open(file)
    num = '@'+str(column_num)
    while True:
        lines = f.readline()
        if lines.strip()[0:3] == '###':
            lines=lines.split(' ',3)
            if lines[1] == 'DELETE' and lines[2] =='FROM':           #该部分替换Delete为Insert
                lines[1] = "INSERT"
                lines[2] = 'INTO'
                lines[-1] = lines[-1].strip()
            if lines[1].strip() == 'WHERE':
                lines[1] = 'VALUES ('
            if  ''.join(lines).find('@') <> -1 and lines[3].split('=',1)[0] <> num:          #num为列数,要是小于最大的列数,后面均加,
                lines[3] = lines[3].split('=',1)[-1].strip()
                if lines[3].strip('\'').strip().find('\'') <> -1:
                    lines[3] = lines[3].split('/*')[0].strip('\'').strip().strip('\'').replace('\\','\\\\').replace('\'','\\\'')  #这里过滤掉转义的字符串
                    lines[3] = '\'' + lines[3] + '\','
                elif lines[3].find('INT meta') <> -1:                #过滤Int类型的字段为负数后带的(),正数不受影响
                    lines[3] = lines[3].split('/*')[0].strip()
                    lines[3] = lines[3].split()[0] + ','
                elif lines[3].find('NULL') <> -1:
                    lines[3] = lines[3].split('/*')[0].strip()
                    lines[3] = lines[3] + ','
                else:
                    lines[3] = lines[3].split('/*')[0].strip('\'').strip().strip('\'').replace('\\','\\\\').replace('\'','\\\'')  #这里过滤掉转义的字符串
                    lines[3] = '\'' + lines[3].strip('\''' ') + '\','
            if  ''.join(lines).find('@') <> -1 and lines[3].split('=',1)[0] == num:          #num为列数,要是小于最大的列数,后面均加);
                lines[3] = lines[3].split('=',1)[-1].strip()
                if lines[3].find('\'') <> -1: 
                    lines[3] = lines[3].split('/*')[0].strip('\'').strip().strip('\'').replace('\\','\\\\').replace('\'','\\\'')  #同上
                    lines[3] = '\'' + lines[3] + '\');'
                elif lines[3].find('INT meta') <> -1:                #同上
                    lines[3] = lines[3].split('/*')[0].strip()
                    lines[3] = lines[3].split(' ')[0] + ');'
                elif lines[3].find('NULL') <> -1:
                    lines[3] = lines[3].split('/*')[0].strip()
                    lines[3] = lines[3] + ');'
                else:
                    lines[3] = lines[3].split('/*')[0].strip('\'').strip().strip('\'').replace('\\','\\\\').replace('\'','\\\'')  #同上
                    lines[3] = '\'' + lines[3].strip('\''' ') + '\');'
            print ' '.join(lines[1:])
        if lines == '':
            break
if __name__ == '__main__':
    import sys
    read_binlog(sys.argv[1],sys.argv[2])

View Code

View Code

举办脚本:方法:python 脚本名 binlog文件 字段数目

执行脚本:方法:python 脚本名 binlog文件 字段数目

python restore.py binlog.txt 36 > binlog.sql
python restore.py binlog.txt 36 > binlog.sql

命令行中的36 表示 需求还原的表的字段有叁1捌个,效果:

命令行中的36 表示 须要復苏的表的字段有37个,效果:

INSERT INTO test.me_info
VALUES (
  2123269,
  '1990:11:12',
  NULL,
  2,
  '',
  0,
  '',
  -1,
  0,
  340800,
  1,
  0,
  '',
……
……
  1,
  NULL
);
INSERT INTO test.me_info
VALUES (
  2123269,
  '1990:11:12',
  NULL,
  2,
  '',
  0,
  '',
  -1,
  0,
  340800,
  1,
  0,
  '',
……
……
  1,
  NULL
);

 最后还原:

 最终还原:

mysql test < binlog.sql
mysql test < binlog.sql