innobackupex备份和恢复MySQL数据

当MySQL数据量很小时，我们可以使用mysqldump来备份，无论是myisam引擎还是innodb引擎都是没有问题的。

但数据量很大，比如上百GB甚至上TB时，再使用mysqldump备份就会很鸡肋了，试想光备份一次全量备份要耗费10几个小时，那就别干别的了。因为，毕竟mysqldump时是会锁表的。

还好我们有xtrabakcup这个工具来备份量级比较大的数据，上百G的数据，仅仅几十分钟搞定，这主要取决于磁盘的I/O效率。不过xtrabackp默认只支持备份innodb，而myisam引擎的数据就不友好了。

不过，没有关系，我们还有一个xtrabackup的变种工具–innobackupex，它不管是innodb还是myisam都通吃。 下面是innobackup工具的安装以及使用方法。

1 安装官方的yum源

rpm -ivh /downloads/percona-release/redhat/0.1-3/percona-release-0.1-3.noarch.rpm

2 安装innobackupex包

yum install percona-xtrabackup

3 授权一个专门用来备份的用户

GRANT RELOAD, LOCK TABLES, REPLICATION CLIENT ON *.* TO 'bakuser'@'localhost' identified by 'yourpassword';

4 全量备份

innobackupex --defaults-file=/etc/f --user=bakuser --password='yourpassword' /bakdir/

说明：defaults-file指定配置文件，它需要通过配置文件来获取一些mysql服务的信息，比如datadir在哪里。user和password就是刚刚授权的用户和密码，最后面的/bakdir为备份数据存放目录。

备份完成后，会在/bakdir生成一个以年月日时间为命名的目录，这个里面就是备份的数据。假如备份的目录为-06-07_17-26-39

5 数据恢复

innobackupex --use-memory=2G --apply-log -06-07_17-26-39innobackupex --defaults-file=/etc/f --use-memory=2G --copy-back /bakdir/-06-07_17-26-39/

说明：第一步为恢复前的准备工作，这一步不做是没法恢复的。第二步执行之前，需要把mysqld服务关闭，而且datadir要清空。

Xtrabackup实现数据的备份与恢复

Xtrabackup介绍

Xtrabackup是由percona开源的免费数据库热备份软件，它能对InnoDB数据库和XtraDB存储引擎的数据库非阻塞地备份（对于MyISAM的备份同样需要加表锁）；mysqldump备份方式是采用的逻辑备份，其最大的缺陷是备份和恢复速度较慢，如果数据库大于50G，mysqldump备份就不太适合。

Xtrabackup安装完成后有4个可执行文件，其中2个比较重要的备份工具是innobackupex、xtrabackup

1）xtrabackup 是专门用来备份InnoDB表的，和mysql server没有交互；

2）innobackupex 是一个封装xtrabackup的Perl脚本，支持同时备份innodb和myisam，但在对myisam备份时需要加一个全局的读锁。

3）xbcrypt 加密解密备份工具

4）xbstream 流传打包传输工具，类似tar

Xtrabackup优点

Xtrabackup优点

1）备份速度快，物理备份可靠

2）备份过程不会打断正在执行的事务（无需锁表）

3）能够基于压缩等功能节约磁盘空间和流量

4）自动备份校验

5）还原速度快

6）可以流传将备份传输到另外一台机器上

7）在不增加服务器负载的情况备份数据

Xtrabackup备份原理

备份原理

备份开始时首先会开启一个后台检测进程，实时检测mysq redo的变化，一旦发现有新的日志写入，立刻将日志记入后台日志文件xtrabackup_log中，之后复制innodb的数据文件一系统表空间文件ibdatax，复制结束后，将执行flush tables with readlock,然后复制.frm MYI MYD等文件，最后执行unlock tables,最终停止xtrabackup_log

输出如下提示信息

xtrabackup: Transaction log of lsn (2543172) to (2543181) was copied.171205 10:17:52 completed OK!

Xtrabackup增量备份介绍

xtrabackup增量备份的原理是：

1)、首先完成一个完全备份，并记录下此时检查点LSN；

2)、然后增量备份时，比较表空间中每个页的LSN是否大于上次备份的LSN，若是则备份该页并记录当前检查点的LSN。

增量备份优点：

1)、数据库太大没有足够的空间全量备份，增量备份能有效节省空间，并且效率高；

2)、支持热备份，备份过程不锁表（针对InnoDB而言），不阻塞数据库的读写；

3)、每日备份只产生少量数据，也可采用远程备份，节省本地空间；

4)、备份恢复基于文件操作，降低直接对数据库操作风险；

5)、备份效率更高，恢复效率更高。

Xtrabackup安装

下载安装xtrabackupwget /downloads/XtraBackup/Percona-XtraBackup-2.4.9/binary/redhat/6/x86_64/Percona-XtraBackup-2.4.9-ra467167cdd4-el6-x86_64-bundle.tar[root@centos ~]# lltotal 703528-rw-r--r-- 1 root root 654007697 Sep 27 09:18 mysql-5.7.17-linux-glibc2.5-x86_64.tar.gz-rw-r--r-- 1 root root 65689600 Nov 30 00:11 Percona-XtraBackup-2.4.9-ra467167cdd4-el6-x86_64-bundle.tar[root@centos ~]# tar xf Percona-XtraBackup-2.4.9-ra467167cdd4-el6-x86_64-bundle.tar[root@centos ~]# yum install percona-xtrabackup-24-2.4.9-1.el6.x86_64.rpm -y[root@centos ~]# which xtrabackup /usr/bin/xtrabackup[root@centos ~]# innobackupex -vinnobackupex version 2.4.9 Linux (x86_64) (revision id: a467167cdd4)#已经安装完成

创建测试数据

mysql> create database test;Query OK, 1 row affected (0.00 sec)mysql> use test;Database changedmysql> create table T1 (name varchar(10) not null,sex varchar(10) not null);Query OK, 0 rows affected (0.15 sec)mysql> insert into T1 values('zhang','man');Query OK, 1 row affected (0.01 sec)mysql> insert into T1 values('zhan','man');Query OK, 1 row affected (0.01 sec)mysql> insert into T1 values('sun','woman');Query OK, 1 row affected (0.00 sec)

Xtrabackup全量备份与恢复

[root@centos ~]# innobackupex --defaults-file=/etc/f --user=root --password="123456" --backup /root

从备份过程截图可以看出会创建一个时间的目录

[root@centos ~]# ll /root/-12-04_13-57-29/total 12352-rw-r----- 1 root root 425 Dec 4 13:57 backup-f-rw-r----- 1 root root 322 Dec 4 13:57 ib_buffer_pool-rw-r----- 1 root root 12582912 Dec 4 13:57 ibdata1drwxr-x--- 2 root root 4096 Dec 4 13:57 mysqldrwxr-x--- 2 root root 4096 Dec 4 13:57 performance_schemadrwxr-x--- 2 root root 12288 Dec 4 13:57 sysdrwxr-x--- 2 root root 4096 Dec 4 13:57 test-rw-r----- 1 root root 22 Dec 4 13:57 xtrabackup_binlog_info-rw-r----- 1 root root 113 Dec 4 13:57 xtrabackup_checkpoints-rw-r----- 1 root root 537 Dec 4 13:57 xtrabackup_info-rw-r----- 1 root root 2560 Dec 4 13:57 xtrabackup_logfile

#这里面就是相关的备份文件，同样也可以看到我们创建的库的名称

[root@centos ~]#innobackupex --apply-log /root/-12-04_13-57-29/

#使用此参数使用相关数据性文件保持一致性状态

mysql> drop table T1;Query OK, 0 rows affected (0.01 sec)mysql> select * from T1;ERROR 1146 (42S02): Table 'test.T1' doesn't exist

接下来准备恢复误删除数据

#恢复数据之前需要保证数据目录是空的状态

[root@centos ~]# innobackupex --defaults-file=/etc/f --copy-back /root/-12-04_13-57-29/

#具体看日志截图

[root@centos ~]# /etc/init.d/mysqld startStarting MySQL. SUCCESS! [root@centos ~]# lsof -i :3306COMMAND PID USER FD TYPE DEVICE SIZE/OFF NODE NAMEmysqld 5935 mysql 21u IPv6 21850 0t0 TCP *:mysql (LISTEN)mysql> use test;Database changedmysql> select * from T1;+-------+-------+| name | sex |+-------+-------+| zhang | man || zhan | man || sun | woman |+-------+-------+3 rows in set (0.00 sec)

##恢复成功

Xtrabackup增量备份与恢复

#需要注意的是，增量备份仅能应用于InooDB或XtraDB表，对于MyISAM表，增量与全备相同

mysql> select * from T1;+-------+-------+| name | sex |+-------+-------+| zhang | man || zhan | man || sun | woman || susun | woman || sige | man || mgg | man |+-------+-------+6 rows in set (0.00 sec)

创建用于增量备份的数据，用来模拟删除掉了全备后的数据，能否通过增量备份文件来恢复

[root@Vcentos ~]# innobackupex --defaults-file=/etc/f --user=root --password=123456 --incremental /backup/ --incremental-basedir=/root/-12-04_13-57-29#--incremental /backup/ 指定增量备份文件备份的目录#--incremental-basedir 指定上一次全备或增量备份的目录

[root@Vcentos ~]# ll /backup/-12-05_09-27-06/total 312-rw-r----- 1 root root 425 Dec 5 09:27 backup-f-rw-r----- 1 root root 412 Dec 5 09:27 ib_buffer_pool-rw-r----- 1 root root 262144 Dec 5 09:27 ibdata1.delta-rw-r----- 1 root root44 Dec 5 09:27 ibdata1.metadrwxr-x--- 2 root root 4096 Dec 5 09:27 mysqldrwxr-x--- 2 root root 4096 Dec 5 09:27 performance_schemadrwxr-x--- 2 root root 12288 Dec 5 09:27 sysdrwxr-x--- 2 root root 4096 Dec 5 09:27 test-rw-r----- 1 root root21 Dec 5 09:27 xtrabackup_binlog_info-rw-r----- 1 root root 117 Dec 5 09:27 xtrabackup_checkpoints-rw-r----- 1 root root 560 Dec 5 09:27 xtrabackup_info-rw-r----- 1 root root 2560 Dec 5 09:27 xtrabackup_logfile[root@centos ~]# cd /backup/-12-05_09-27-06/[root@centos -12-05_09-27-06]# cat xtrabackup_binlog_infomysql-bin.000001945[root@centos -12-05_09-27-06]# cat xtrabackup_checkpointsbackup_type = incrementalfrom_lsn = 2542843to_lsn = 2547308last_lsn = 2547317compact = 0recover_binlog_info = 0

删除一条数据来测试增量恢复

mysql> delete from T1 where name='susun';Query OK, 1 row affected (0.06 sec)

增量恢复操作过程如下

[root@centos ~]# innobackupex --apply-log --redo-only /root/-12-04_13-57-29/[root@centos ~]# innobackupex --apply-log --redo-only /root/-12-04_13-57-29/ --incremental-dir=/backup/-12-05_09-27-06/

恢复全部数据

[root@centos ~]#innobackupex --defaults-file=/etc/f --copy-back /root/-12-04_13-57-29/[root@centos ~]# /etc/init.d/mysqld startStarting MySQL.. SUCCESS! [root@centos ~]# lsof -i :3306COMMAND PID USER FD TYPE DEVICE SIZE/OFF NODE NAMEmysqld 23217 mysql 21u IPv6 283226 0t0 TCP *:mysql (LISTEN)

查看恢复的数据完整性

参考链接 ：

innobackupex备份和恢复MySQL数据 ： https://mp./s/ch3NGfCtECvtI-GW6Q8_6Q

Xtrabackup实现数据的备份与恢复 https://mp./s/khHbIkwTiWkV7Aviw3R2jA