设为首页 收藏本站
查看: 1420|回复: 0

[经验分享] 使用xtrabackup进行MySQL数据库备份

[复制链接]
累计签到:1 天
连续签到:1 天
发表于 2017-3-22 09:16:45 | 显示全部楼层 |阅读模式
使用xtrabackup进行MySQL数据库备份一、简介    MySQL自带的mysqldump备份方式是采用逻辑备份,但是它最大的缺陷就是备份和恢复速度慢对于一个小于50G的数据库而言,这个速度还是能接受的,但如果数据库非常大,那再使用mysqldump备份就不太适合了。
    目前主流的有两个工具可以实现物理热备:ibbackup和xtrabackup;ibbackup是商业软件,需要授权,非常昂贵。而xtrabackup功能比ibbackup还要强大,但却是开源的。号称免费版的InnoDB HotBackup。
官方链接地址:http://www.percona.com/software/percona-xtrabackup;可以下载源码编译安装,也可以下载适合的RPM包或使用yum进行安装或者下载二进制源码包。

Xtrabackup它提供了两种命令行工具:
xtrabackup:专用于备份InnoDB和XtraDB引擎的数据;
innobackupex:这是一个perl脚本,在执行过程中会调用xtrabackup命令,这样用该命令即可以实现备份InnoDB,也可以备份MyISAM引擎的对象。

Xtrabackup是由percona提供的mysql数据库备份工具,特点:
(1)备份过程快速、可靠;
(2)备份过程不会打断正在执行的事务;
(3)能够基于压缩等功能节约磁盘空间和流量;
(4)自动实现备份检验;
(5)还原速度快。

二、安装xtrabackup1、下载xtrabackup
1
wget https://www.percona.com/download ... Linux-x86_64.tar.gz




2、解压
1
tar zxf percona-xtrabackup-2.4.4-Linux-x86_64.tar.gz



3、进入解压后的目录
1
cd percona-xtrabackup-2.4.4-Linux-x86_64/



4、复制bin下的所有程序到/usr/bin
1
cp bin/* /usr/bin/



注:Xtrabackup中主要包含两个工具:
xtrabackup:是用于热备份innodb, xtradb表中数据的工具,支持在线热备份,可以在不加锁的情况下备份Innodb数据表,不过此工具不能操作Myisam引擎表;
innobackupex:是将xtrabackup进行封装的perl脚本,能同时处理Innodb和Myisam,但在处理Myisam时需要加一个读锁。
由于操作Myisam时需要加读锁,这会堵塞线上服务的写操作,而Innodb没有这样的限制,所以数据库中Innodb表类型所占的比例越大,则越有利。
5、安装相关插件
1
yum -y install perl-DBI perl-DBD-MySQL perl-Time-HiRes perl-IO-Socket-SSL perl-TermReadKey.x86_64 perl-Digest-MD5



6、下载percona-toolkit并安装
1
2
wget https://www.percona.com/download ... 2.2.19-1.noarch.rpm
rpm -vih percona-toolkit-2.2.19-1.noarch.rpm




三、进行xtrabackup完全备份+binlog增量备份1、创建备份目录
1
mkdir -p /opt/mysqlbackup/{full,inc}



注:full:全备存放的目录;inc:增量备份存放的目录
2、开启bin-log日志文件
编辑mysql配置文件添加以下内容:
1
2
vim /etc/my.cnf
log-bin = /etc/local/mysql/data/mysql-bin



重启mysql服务:
1
systemctl restart mysqld



3、创建用来测试的数据
1
mysql -uroot -p123456



1
2
3
4
5
mysql> create database test;
mysql> use test;
mysql> create table tb1(id int primary key auto_increment,name varchar(20));
mysql> insert into tb1(name) values('zhangsan');
mysql> insert into tb1(name) values('lisi');



QQ截图20170322091507.png
4、进行完全备份
语法:
1
innobackupex --user=DBUSER --password=DBUSERPASS  /path/to/BACKUP-DIR/



注:相关选项说明
--user:指定连接数据库的用户名;
--password:指定连接数据库的密码;
/path/to/BACKUP-DIR/:备份文件的存放位置;
--defaults-file:指定数据库的配置文件,innobackupex要从其中获取datadir等信息;
--database:指定要备份的数据库,这里指定的数据库只对MyISAM表有效,对于InnoDB 数据来说都是全备(所有数据库中的InnoDB数据都进行了备份,不是只备份指定的数据库,恢复时也一样)。
--no-timestamp:会阻止命令自动创建一个以时间命名的目录;如此一来,innobackupex命令将会创建一个BACKUP-DIR目录来存储备份数据

进行全库备份:
1
innobackupex --user=root --password=123456 /opt/mysqlbackup/full



出现以下提示,表示成功
iyunv.com-2017-3-223.png
在备份的同时,备份数据会在备份目录下创建一个以当前日期时间为名字的目录存放备份文件:
iyunv.com-2017-3-224.png
注:各文件说明
xtrabackup_checkpoints:备份类型(如完全或增量)、备份状态(如是否已经为prepared状态)和LSN(日志序列号)范围信息;
每个InnoDB页(通常为16k大小)都会包含一个日志序列号,即LSN。LSN是整个数据库系统的系统版本号,每个页面相关的LSN能够表明此页面最近是如何发生改变的。
xtrabackup_binlog_info:mysql服务器当前正在使用的二进制日志文件及至备份这一刻为止二进制日志事件的位置。
xtrabackup_binlog_pos_innodb:二进制日志文件及用于InnoDB或XtraDB表的二进制日志文件的当前position。
xtrabackup_binary:备份中用到的xtrabackup的可执行文件;
backup-my.cnf:备份命令用到的配置选项信息;
注意:备份数据库的用户需要具有相应权限,如果要使用一个最小权限的用户进行备份,则可基于如下命令创建此类用户:
1
2
3
4
mysql> create user 'bkpuser'@'localhost' identified by '123456';
mysql> revoke all privileges,grant option from 'bkpuser'@'localhost';
mysql> grant reload,lock tables,replication client, process on *.* to 'bkpuser'@'localhost';
mysql> flush privileges;



5、进行增量备份
查看完全备份时binlog日志位置(position):
iyunv.com-2017-3-225.png
模拟数据库修改:
1
2
3
4
mysql> use test
mysql> insert into tb1(name) values('wangwu');
mysql> insert into tb1(name) values('zhaoliu');
mysql> exit



增量备份二进制文件:
1
mysqlbinlog --start-position=1049 /usr/local/mysql/data/mysql-bin.000001 > /opt/mysqlbackup/inc/`date -I`.sql



iyunv.com-2017-3-226.png
6、模拟数据库损坏:
1
rm -fr /usr/local/mysql/data/*



7、还原完全备份:
(1)准备(prepare)一个完全备份
一般情况下,在备份完成后,数据尚且不能用于恢复操作,因为备份的数据中可能会包含尚未提交的事务或已经提交但尚未同步至数据文件中的事务。因此,此时数据文件仍处理不一致状态。“准备”的主要作用正是通过回滚未提交的事务及同步已经提交的事务至数据文件也使得数据文件处于一致性状态。在准备(prepare)过程结束后,InnoDB表数据已经前滚到整个备份结束的点,而不是回滚到xtrabackup刚开始时的点。
innobakupex命令的--apply-log选项可用于实现上述功能。如下面的命令:
1
innobackupex --apply-log /opt/mysqlbackup/full/2016-09-12_11-29-55/



--apply-log指明是将日志应用到数据文件上,完成之后将备份文件中的数据恢复到数据库中
注:/opt/mysqlbackup/full/2016-09-12_11-29-55/备份文件所在目录名称
如果执行正确,其最后输出的几行信息通常如下:
iyunv.com-2017-3-227.png
    在实现“准备”的过程中,innobackupex通常还可以使用--use-memory选项来指定其可以使用的内存的大小,默认通常为100M。如果有足够的内存可用,可以多划分一些内存给prepare的过程,以提高其完成速度。

(2)还原数据库:
innobackupex命令的--copy-back选项用于执行恢复操作,其通过复制所有数据相关的文件至mysql服务器DATADIR目录中来执行恢复过程。innobackupex通过backup-my.cnf来获取DATADIR目录的相关信息。
1
innobackupex --copy-back /opt/mysqlbackup/full/2016-09-12_11-29-55/



这里的--copy-back指明是进行数据恢复。数据恢复完成之后,需要修改相关文件的权限mysql数据库才能正常启动。
如果执行正确,其输出信息的最后几行通常如下:
iyunv.com-2017-3-228.png 请确保如上信息的最行一行出现“completed OK!”。
当数据恢复至DATADIR目录以后,修改还原后的数据目录属主属组为root所以还需将该目录属主属组改为mysql:
1
chown -R mysql:mysql /usr/local/mysql/data/



重启动MySQL:
1
systemctl restart mysqld



验证还原后的数据:
iyunv.com-2017-3-229.png

8、还原增量备份
为了防止还原时产生大量的二进制日志,在还原时可临时关闭二进制日志后再还原:
1
2
mysql> set sql_log_bin=0;
mysql> source /opt/mysqlbackup/inc/2017-03-21.sql



重新启动二进制日志并验证还原数据:
1
mysql> set sql_log_bin=1;



验证数据是否恢复回来
iyunv.com-2017-3-2210.png


运维网声明 1、欢迎大家加入本站运维交流群:群②:261659950 群⑤:202807635 群⑦870801961 群⑧679858003
2、本站所有主题由该帖子作者发表,该帖子作者与运维网享有帖子相关版权
3、所有作品的著作权均归原作者享有,请您和我们一样尊重他人的著作权等合法权益。如果您对作品感到满意,请购买正版
4、禁止制作、复制、发布和传播具有反动、淫秽、色情、暴力、凶杀等内容的信息,一经发现立即删除。若您因此触犯法律,一切后果自负,我们对此不承担任何责任
5、所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其内容的准确性、可靠性、正当性、安全性、合法性等负责,亦不承担任何法律责任
6、所有作品仅供您个人学习、研究或欣赏,不得用于商业或者其他用途,否则,一切后果均由您自己承担,我们对此不承担任何法律责任
7、如涉及侵犯版权等问题,请您及时通知我们,我们将立即采取措施予以解决
8、联系人Email:admin@iyunv.com 网址:www.yunweiku.com

所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其承担任何法律责任,如涉及侵犯版权等问题,请您及时通知我们,我们将立即处理,联系人Email:kefu@iyunv.com,QQ:1061981298 本贴地址:https://www.yunweiku.com/thread-353331-1-1.html 上篇帖子: mysql慢查询分析工具 下篇帖子: MySQL查询某库数据量 数据库备份
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

扫码加入运维网微信交流群X

扫码加入运维网微信交流群

扫描二维码加入运维网微信交流群,最新一手资源尽在官方微信交流群!快快加入我们吧...

扫描微信二维码查看详情

客服E-mail:kefu@iyunv.com 客服QQ:1061981298


QQ群⑦:运维网交流群⑦ QQ群⑧:运维网交流群⑧ k8s群:运维网kubernetes交流群


提醒:禁止发布任何违反国家法律、法规的言论与图片等内容;本站内容均来自个人观点与网络等信息,非本站认同之观点.


本站大部分资源是网友从网上搜集分享而来,其版权均归原作者及其网站所有,我们尊重他人的合法权益,如有内容侵犯您的合法权益,请及时与我们联系进行核实删除!



合作伙伴: 青云cloud

快速回复 返回顶部 返回列表