如何从MySQL/InnoDB数据文件中的恢复数据

运维 系统运维
本文主要介绍在使用Percona Data Recovery Tool for InnoDB时候的一些注意事项,和遇到MySQL数据丢失的一些应对策略。

在上上周给下厨房做过一次数据恢复(故障回顾:故障发生的技术总结 致歉信),恢复使用了开源工具Percona Data Recovery Tool for InnoDB(后面简称PDRTI),这里分享一下期间的注意事项,和遇到MySQL数据丢失的一些应对。

本文主要介绍在使用Percona Data Recovery Tool for InnoDB时候的一些注意事项,并不包括具体的step by step的使用步骤,使用文档可以参考:Reference Manual and Documentation

1. 简述恢复原理

因为文档中较为详细的描述,这里只简单说明。所有InnoDB的数据都是索引的方式组织的,而且所有的数据都是存储在16KB的数据块中。恢复的过程分几步,分解所有数据文件为单个16KB大小的页面,根据每个页面的标记的数据起点开始尝试匹配,如果与给定表定义的size合适,认为匹配成功,则输出记录。

2. 并行的恢复

数据恢复通常是争分夺秒的,PDRTI工具本身是一个基础工具,如果使用该工具做做串行恢复,时间会非常长,通过简单的shell脚本可以让constraints_parser脚本并行工作,这样可以大大缩短数据的恢复时间。根据实际经验,机器稍微好点,实际恢复时间可以缩短到串行的二十分之一。也就是说,原来需要40小时,通过并行可能2个小时就可以了。

以下是两个并行恢复的脚本,供参考:

#!/bin/bash ws=/u01/recovery pagedir=/u01/recovery/pages-1372436970/FIL_PAGE_INDEX logdir=/u01/recovery/log rectool=/u01/recovery/percona-data-recovery-tool-for-innodb-0.5/constraints_parser cd `dirname $rectool` count=0 page_count=353894 page_done=0 startdate=`date +%s` for d1 in `ls $pagedir` do count=$(($count+1)) echo "in page $d2 at dir $d1" > $logdir/$count.log thedate=`date +%s` echo "$page_done / $page_count at $thedate from $startdate" total=`ls -l $pagedir/$d1/|wc -l` page_done=$(($page_done+$total)) threads=`ps axu|grep parser_jobs|grep -v grep|wc -l` echo $threads while [ $threads -gt 48 ]; do sleep 1 threads=`ps axu|grep parser_jobs|grep -v grep|wc -l` done $ws/parser_jobs.sh $pagedir/$d1 > $ws/job.log 2>&1 & done
#!/bin/bash pagedir=/u01/recovery/pages-1372436970/FIL_PAGE_INDEX logdir=/u01/recovery/log rectool=/u01/recovery/percona-data-recovery-tool-for-innodb-0.5/constraints_parser logfile="$logdir/`basename $1`.log" echo "$1" > $logfile if [ -d $1 ];then for d2 in `ls $1` do $rectool -5 -f $1/$d2 >> $logfile 2>/dev/null done fi

3. 从索引中恢复

如果知道数据表的索引结构,如果数据部分损坏,但是索引部分完整,可以通过这个办法提取出来更多的字段信息。

4. 紧急情况下的问题处理

这次下厨房的技术总结中提到,"***时间停止MySQL防止硬盘继续写入这个应急措施是错误的",正常如果进程没有被关闭,进程所打开的文件是不会被覆盖的,可以通过从/proc文件系统拷贝的方式恢复出当前仍然打开的文件(参考:Recovering files from /Proc)。如果数据文件和日志文件都能够cp出来,那么有希望让MySQL自己启动,并根据事务日志恢复出当前一致的数据。

5. ***,没有***了

如果你需要数据恢复,可以联系我,提供免费的咨询,和收费的恢复服务。另外,如果需要专业服务可以联系沃趣科技,他们提供专业的、完整的数据库服务。

原文链接:http://www.orczhou.com/index.php/2013/07/how-to-recover-data-from-mysql-innodb-data-file-ibd-file/

责任编辑:黄丹 来源: orczhou.com
相关推荐

2011-05-17 11:33:43

oracle数据库

2017-06-22 08:41:58

MySQLibd文件恢复数据

2022-12-01 14:02:02

MySQL数据文件

2011-03-22 16:20:19

恢复数据库

2017-05-31 16:10:45

MySQL误操作恢复数据

2011-08-29 16:41:14

OracleRMAN恢复数据文件的恢复

2011-03-22 15:55:26

数据库内容恢复

2012-12-07 14:27:47

MySQL

2010-10-13 14:02:01

MySQL数据文件

2021-08-14 08:59:19

勒索病毒网络安全网络攻击

2012-11-07 09:44:42

IBMdw

2010-07-13 14:09:07

SQL Server数

2010-05-06 09:42:28

Oracle表空间

2023-09-05 00:06:45

2010-10-13 11:02:52

MySQL数据文件

2010-10-13 10:49:42

MySQL数据文件

2012-12-07 14:17:32

MySQL数据恢复

2010-07-15 14:16:16

SQLServer恢复

2021-10-15 09:55:48

Myloader数据教程

2013-11-04 10:48:34

Git开发数据恢复
点赞
收藏

51CTO技术栈公众号