mysql 做增量备份

hmzone

　　首先在这里我要感谢我的同事 @mamiya_c3 哥的指教。。。QQQ
　　最近数据库的数据猛然增多，以前的每天一个正备份的方式显然压力越来越大，对备份的数据传输考验也随之加大，所以考虑改成每周二服务器维护的时候坐全备份，剩下每天做增量备份。
　　工作原理就是把每次完整备份的binlog 和postion取出，做增量备份的时候取当时的binlog和postion，使用mysqlbinlog 把这之间的数据读出到另一个文件。
　　注：本文中可能有个别地方会有些纰漏，请大家自行调试，因为下面的脚本是我用在真实环境中copy过来的，只是临时改了里面个别的参数，例如文件夹位置，密码等。。。。如有问题敬请谅解
　　一、完整备份
　　vi full_mysqldump.sh
　　#!/bin/sh
　　###########
　　#########
　　#########DIR_INFO############
　　date=`date +%Y%m%d`
　　BACK_DIR="/home/profiles/liuhaifeng/fullbackup"
　　FILE_DIR="/home/profiles/liuhaifeng"
　　#############################3MYSQL_BACK#########################
　　if [ ! -d $BACK_DIR$date ];then
　　mkdir -p $BACK_DIR$date
　　fi
　　/usr/local/mysql/bin/mysql -uroot -p'123456' -h 127.0.0.1 -P 3306 -e "FLUSH TABLES WITH READ LOCK"
　　/usr/local/mysql/bin/mysqldump -uroot -p'123456' -h 127.0.0.1 -P 3306 --default-character-set=gbk --opt --triggers -R --hex-blob --flush-logs --master-data=2 --all-databases > $BACK_DIR$date/fullbackup.sql
　　/usr/local/mysql/bin/mysql -u root -p'123456' -h 127.0.0.1 -P 3306 -e "UNLOCK TABLES"
　　##########################
　　################get postion###############
　　sed -n "22p" a.sql | awk -F'=|,|;' '{print $2,$4}' > $FILE_DIR/postion
　　################# FTP TO 16.1 ###############
　　################# FTP    INFO ###############
　　HOST="192.168.16.1"
　　USER="user"
　　PASSWD="password"
　　FTP_DIR="database"
　　ftp_db()
　　{
　　ftp -n /dev/null 2>&1 &
　　open $HOST
　　user $USER $PASSWD
　　binary
　　prompt
　　cd $FTP_DIR
　　put $1
　　bye
　　!
　　echo "sql backup suecss!!"
　　}
　　##############################################
　　#####################TRANSFER INFL#############
　　cd $BACK_DIR$date
　　if [ ! -f fullbackup.sql ]; then
　　echo "mysqldump back file faild !!! please check"
　　exit 1
　　fi
　　/bin/tar zcf fullbackup_$date.tar.gz fullbackup.sql
　　sleep 5
　　ftp_db fullbackup_$date.tar.gz
　　二、做增量备份，根据上面完整备份所获得的postion以及binlog 与服务器当前的postion和binlog做增量备份，备份后把当前的postion以及binlog 存到postion文件中，留坐下一次增量备份的其实点。
　　vi  zl_backup.sh
　　#!/bin/sh
　　#####for zengliang backup########
　　DATE=`date +%Y%m%d`
　　OLDDATE=`date --date='10 days ago' +%Y%m%d`
　　BACK_DIR="/data/mysql2/"
　　FILE_DIR="/home/profiles/liuhaifeng"
　　startbinlog=`awk '{print $1}' $FILE_DIR/postion`
　　startpostion=`awk '{print $2}' $FILE_DIR/postion`
　　cd $FILE_DIR
　　mysql -uroot -p123456 -S /tmp/mysql.sock3306 -h 192.168.16.3 -e "show master status\G;"|awk '{print $2}' > nowpostion
　　stopbinlog=`sed -n '3p' $FILE_DIR/nowpostion`
　　stoppostion=`sed -n '4p' $FILE_DIR/nowpostion`
　　if [ "$startbinlog" == "$stopbinlog" ]; then
　　mysqlbinlog --start-position=$startpostion --stop-position=$stoppostion $BACK_DIR$startbinlog >> ch_zlback_$DATE.sql
　　else
　　startline=`awk "/$startbinlog/{print NR}" $BACK_DIR/mysql-bin-bj1.index`
　　stopline=`wc -l $BACK_DIR/mysql-bin-bj1.index |awk '{print $1}'`
　　for i in `seq $startline $stopline`
　　do
　　binlog=`sed -n "$i"p  $BACK_DIR/mysql-bin-bj1.index |sed 's/.\///g'`
　　case "$binlog" in
　　"$startbinlog")
　　mysqlbinlog --start-position=$startpostion $BACK_DIR$binlog >> ch_zlback_$DATE.sql
　　;;
　　"$stopbinlog")
　　mysqlbinlog --stop-position=$stoppostion $BACK_DIR$binlog >> ch_zlback_$DATE.sql
　　;;
　　*)
　　mysqlbinlog $BACK_DIR$binlog >> ch_zlback_$DATE.sql
　　esac
　　done
　　fi
　　####for ftp######
　　HOST="192.168.16.1"
　　USER="user"
　　PASSWD="password"
　　FTP_DIR="database"
　　ftp_db()
　　{
　　ftp -n /dev/null 2>&1 &
　　open $HOST
　　user $USER $PASSWD
　　binary
　　prompt
　　cd $FTP_DIR
　　put $1
　　bye
　　!
　　echo "sql backup suecss!!"
　　}
　　if [ -f ch_zlback_$DATE.sql ];then
　　tar czf ch_zlback_$DATE.tar.gz ch_zlback_$DATE.sql
　　sleep 3
　　ftp_db ch_zlback_$DATE.tar.gz
　　echo "$stopbinlog $stoppostion" > $FILE_DIR/postion
　　rm -rf ch_zlback_$OLDDATE.sql ch_zlback_$OLDDATE.tar.gz
　　else
　　echo "$DATE backup fail!!!!"
　　fi
　　三、做好计划任务
　　把增量备份脚本 和 完全备份脚本按照想要的时间写在计划任务中，做定时的增量备份。
　　当然还原的时候需要按照顺序依次还原。