MySQL XtraBackup自动恢复脚本

kiloyp

1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 54 55 56 57 58 59 60 61 62 63 64 65 66 67 68 69 70 71 72 73 74 75 76 77 78 79 80 81 82 83 84 85 86 87 88 89 90 91 92 93 94 95 96 97 98 99 100 101 102 103 104 105 106 107 108 109 110 111 112 113 114 115 116 117 118 119 120 121 122 123 124 125 126 127 128 129 130 131 132 133 134 135 136 137 138 139 140 141 142 143 144 145 146 147 148 149 150 151 152 153 154 155 156 157 158 159 160 161 162 163 164 165 166 167 168 169 170 171 172 173 174 175 176 177 178 179 180 181 182 183 184 185 186 187 188 189 190 191 192 193 194 195 196 197 198 199 200 201 202 203 204 205 206 207 208 209 210 211 212 213 214 215 216 217 218 219 220 221 222 223 224 225 226 227 228 229 230 231 232 233 234 235 236 237 238 239 240 241 242 243 244 245 246 247 248 249 250 251 252 253 254 255 256 257 258 259 260 261 262 263 264 265 266 267 268 269 270 271 272 273 274 275 276 277 278 279 280 281 282 283 284 285 286 287 288 289 290 291 292 293 294 295 296 297 298 299 300 301 302 303 304 305 306 307 308 309 310 311 312 313 314 315 316 317 318 319 320 321 322 323 324 325 326 327 328 329 330 331 332 333 334 335 336 337 338 339 340 341 342 343 344 345 346 347 348 349 350 351 352 353 354 355 356 357 358 359 360 361 362 363 364 365 366 367 368 369 370 371 372 373 374 375 376 377 378 379 380 381 382 383 384 385 386 387 388 389 390 391 392 393 394 395 396 397 398 399 400 401 402 403 404 405 406 407 408 409 410 411 412 413 414 415 416 417 418 419 420 421 422 423 424 425 426 427 428

#!/bin/sh ################## #author:rrhelei@126.com# ################## #xtrabackup2.1.8 # 使用方法： # ./restore.sh /增量备份父目录或全备的父目录名 #eg1:./restore.sh/data/backup/full/ #eg2:./restore.sh/data/backup/incre/ #NOTICE：增量备份还原如果指定文件，则还原到指定文件名的上一个文件末截止. #即输入的增量文件名应为需要截止的增量文件名的下一个文件 #NOTE:恢复开始前请确保mysql服务停止以及数据和日志目录清空,如 # rm -rf/data/mysql/innodb_data/* # rm -rf/data/mysql/data/* # rm -rf/data/mysql/mysql_logs/innodb_log/* echo"*************************************************************************" echo -e '\e[32m 提示:mysql端口根据实际环境修改. \e[m' #红色 echo"*************************************************************************" INNOBACKUPEX=innobackupex INNOBACKUPEX_PATH=/usr/local/xtrabackup/bin/$INNOBACKUPEX TMP_LOG="/var/log/restore.$$.log" MY_CNF=/etc/my.cnf BACKUP_DIR=/databackup # 你的备份主目录 FULLBACKUP_DIR=$BACKUP_DIR/full # 全库备份的目录 INCRBACKUP_DIR=$BACKUP_DIR/incre # 增量备份的目录 MEMORY=1024M # 还原的时候使用的内存限制数 ERRORLOG=`grep-i "^log-error" $MY_CNF |cut -d = -f 2` MYSQLD_SAFE=/usr/local/mysql/bin/mysqld_safe MYSQL_PORT=3306 ############################################################################# #显示错误 ############################################################################# error() {      echo "$1" 1>&2      exit 1 } ############################################################################# # 检查innobackupex错误输出 ############################################################################# check_innobackupex_fail() {      if [ -z "`tail -2 $TMP_LOG | grep'completed OK!'`" ] ; then      echo "$INNOBACKUPEX命令执行失败:";echo      echo "----------$INNOBACKUPEX的错误输出 ----------"      cat $TMP_LOG      #保留一份备份的详细日志     logfiledate=restore.`date +%Y%m%d%H%M`.txt      cat $TMP_LOG>/backup/$logfiledate      rm -f $TMP_LOG      exit 1    fi } # 选项检测 if [ ! -x$INNOBACKUPEX_PATH ]; then    error"$INNOBACKUPEX_PATH在指定路径不存在,请确认是否安装或核实链接是否正确." fi if [ ! -d $BACKUP_DIR ]; then    error "备份目录$BACKUP_DIR不存在.请新建备份主目录$BACKUP_DIR" fi if [ $# != 1 ] ; then    error "使用方法: $0 使用还原目录的绝对路径" fi if [ ! -d $1 ]; then    error "指定的备份目录:$1不存在." fi PORTNUM00=`netstat -lnt|grep ${MYSQL_PORT}|wc-l` if [ $PORTNUM00 = 1  ]; then echo -e "\e[31mNOTE:------------------------------------------.\e[m" #红色 echo -e "\e[31m mysql处于运行状态,请关闭mysql. \e[m" #红色 echo -e "\e[31mNOTE:------------------------------------------.\e[m" #红色 exit 0 fi ################判断还原增量备份部分还是所有################ echo"*************************************************************************" echo -e "\e[31m 输入的增量文件名应为截止的增量文件名的下一个文件.\e[m" #红色 echo"*************************************************************************" ipname='' read -p "输入截止增量备份名[默认所有]:"ipname echo echo "输入截止增量备份名为:$ipname" input_value=$1 intpu_res=`echo ${input_value%/*}` # Some info output echo "----------------------------" echo echo "$0: MySQL还原脚本" START_RESTORE_TIME=`date+%F' '%T' '%w` echo "数据库还原开始于:$START_RESTORE_TIME" echo #PARENT_DIR=`dirname ${intpu_res}` PARENT_DIR=${intpu_res} if [ $PARENT_DIR = $FULLBACKUP_DIR ]; then FULL=`ls-t $FULLBACKUP_DIR |head -1` FULLBACKUP=${intpu_res}/$FULL echo "还原完全备份:`basename $FULLBACKUP`" echo else ################判断还原部分增量备份还是所有增量备份################ if ["$ipname" = '' ];then if [ $PARENT_DIR = $INCRBACKUP_DIR ]; then FULL=`ls-t $FULLBACKUP_DIR |head -1` FULLBACKUP=$FULLBACKUP_DIR/$FULL if [ ! -d$FULLBACKUP ]; then error "全备:$FULLBACKUP不存在." fi INCR=`ls -t $INCRBACKUP_DIR/$FULL/ |sort -nr | head -1 ` #查找最后一个增量备份文件 echo "还原将从全备全备$FULL开始,到增量$INCR结束." echo echo "Prepare:完整备份..........." echo"*****************************" $INNOBACKUPEX_PATH--defaults-file=$MY_CNF --apply-log --redo-only --use-memory=$MEMORY$FULLBACKUP > $TMP_LOG 2>&1 check_innobackupex_fail # Prepare增量备份集,即将增量备份应用到全备目录中,按照增量备份顺序即按照时间从旧到最新 for i in`find $PARENT_DIR/$FULL -mindepth 1 -maxdepth 1 -type d -printf"%P\n" | sort -n `; do #判断最新全备的lsn #check_full_file=`find$FULLBACKUP/ -mindepth 1 -maxdepth 1 -type d -printf "%P\n" | sort-nr | head  -1` check_full_lastlsn=$FULLBACKUP/xtrabackup_checkpoints fetch_full_lastlsn=`grep-i "^last_lsn" ${check_full_lastlsn} |cut -d = -f 2` ######判断增量备份中第一个增量备份的LSN #check_incre_file=`find$PARENT_DIR/$FULL -mindepth 1 -maxdepth 1 -type d -printf "%P\n" |sort -n |  head -1` check_incre_lastlsn=$PARENT_DIR/$FULL/$i/xtrabackup_checkpoints fetch_incre_lastlsn=`grep-i "^last_lsn" ${check_incre_lastlsn} |cut -d = -f 2` echo "完全备份$FULLBACKUP的LSN值:${fetch_full_lastlsn} " echo "增量备份$i的LSN值:${fetch_incre_lastlsn} " if ["${fetch_incre_lastlsn}" -eq "${fetch_full_lastlsn}" ];then echo"*****************************************" echo "LSN相等,不需要prepare!" echo"*****************************************" echo break else echo "Prepare:增量备份集$i........" echo"*****************************" $INNOBACKUPEX_PATH--defaults-file=$MY_CNF --apply-log --redo-only --use-memory=$MEMORY$FULLBACKUP --incremental-dir=$PARENT_DIR/$FULL/$i > $TMP_LOG 2>&1 check_innobackupex_fail if [$INCR = $i ]; then break fi fi ######判断LSN done else error "未知的备份类型"   fi else FULL=`ls-t $FULLBACKUP_DIR |head -1` FULLBACKUP=$FULLBACKUP_DIR/$FULL echo "Prepare:完整备份..........." echo"*****************************" $INNOBACKUPEX_PATH--defaults-file=$MY_CNF --apply-log --redo-only --use-memory=$MEMORY$FULLBACKUP > $TMP_LOG 2>&1 check_innobackupex_fail ipt=`stat-c=%Z  $PARENT_DIR/$FULL/$ipname |cut -d= -f 2` echo "还原的指定增量目录文件$ipname的纪元时间为:$ipt" for i in`find $PARENT_DIR/$FULL -mindepth 1 -maxdepth 1 -type d -printf"%P\n" | sort -n `; do #判断for循环取到的文件名是否为输入的文件名，如果是则停止循环 if ["$i" =  "$ipname" ];then break; else f01=`stat-c=%Z  $PARENT_DIR/$FULL/$i |cut -d = -f2` if ["$f01" -le "$ipt" ]; then if [$PARENT_DIR = $INCRBACKUP_DIR ]; then if [ ! -d$FULLBACKUP ]; then error "全备:$FULLBACKUP不存在." fi #INCR=`ls-t $INCRBACKUP_DIR/$FULL/ |sort -nr | head -1` echo "还原将从全备$FULL开始,到增量$ipname结束." echo #判断最新全备的lsn #check_full_file=`find$FULLBACKUP/ -mindepth 1 -maxdepth 1 -type d -printf "%P\n" | sort-nr | head  -1` check_full_lastlsn=$FULLBACKUP/xtrabackup_checkpoints fetch_full_lastlsn=`grep-i "^last_lsn" ${check_full_lastlsn} |cut -d = -f 2` ######判断增量备份中第一个增量备份的LSN check_incre_file=`find$PARENT_DIR/$FULL -mindepth 1 -maxdepth 1 -type d -printf "%P\n" |sort -n |  head -1` check_incre_lastlsn=$PARENT_DIR/$FULL/$i/xtrabackup_checkpoints fetch_incre_lastlsn=`grep-i "^last_lsn" ${check_incre_lastlsn} |cut -d = -f 2` echo "完全备份的LSN:${fetch_full_lastlsn} " echo "增量备份的LSN:${fetch_incre_lastlsn} " if ["${fetch_incre_lastlsn}" -eq "${fetch_full_lastlsn}" ];then echo"*****************************************" echo -e "\e[31m LSN不需要prepare或备份间隔期间无数据变化 \e[m" #红色 echo"*****************************************" fi echo echo "Prepare:增量备份集$i........" echo"*****************************" $INNOBACKUPEX_PATH--defaults-file=$MY_CNF --apply-log --redo-only --use-memory=$MEMORY$FULLBACKUP --incremental-dir=$PARENT_DIR/$FULL/$i > $TMP_LOG 2>&1 check_innobackupex_fail ######判断LSN check_full_lastlsn=$FULLBACKUP/xtrabackup_checkpoints fetch_full_lastlsn=`grep-i "^last_lsn" ${check_full_lastlsn} |cut -d = -f 2` echo "完全备份当前的LSN:${fetch_full_lastlsn}" else error "未知的备份类型" fi else echo "查找增量备份文件完成." check_full_lastlsn=$FULLBACKUP/xtrabackup_checkpoints fetch_full_lastlsn=`grep-i "^last_lsn" ${check_full_lastlsn} |cut -d = -f 2` echo -e "\e[31m --------------------------------------------\e[m" #红色 echo -e "\e[31m 完全备份最终的LSN:${fetch_full_lastlsn} \e[m" #红色 echo -e "\e[31m --------------------------------------------\e[m" #红色 break fi fi done fi ################判断还原部分增量备份还是所有增量备份################ fi echo echo "prepare:完整备份以及回滚那些未提交的事务..........." $INNOBACKUPEX_PATH --defaults-file=$MY_CNF--apply-log --use-memory=$MEMORY $FULLBACKUP > $TMP_LOG 2>&1 check_innobackupex_fail echo "*****************************" echo "数据库还原中 ...请稍等" echo"*****************************" $INNOBACKUPEX_PATH --defaults-file=$MY_CNF--copy-back $FULLBACKUP > $TMP_LOG 2>&1 check_innobackupex_fail rm -f $TMP_LOG echo "1.恭喜,还原成功!." echo"*****************************" #修改目录权限 echo "修改mysql目录的权限." mysqlcnf="/etc/my.cnf" mysqldatadir=`grep -i "^datadir"$mysqlcnf |cut -d = -f 2` `echo 'chown -R mysql:mysql' ${mysqldatadir}` echo "2.权限修改成功!" echo"*****************************" #自动启动mysql INIT_NUM=1 if [ ! -x $MYSQLD_SAFE ]; then    echo "mysql安装时启动文件未安装到$MYSQLD_SAFE或无执行权限"    exit 1  #0是执行成功,1是执行不成功 else echo "启动本机mysql端口为:$MYSQL_PORT的服务" $MYSQLD_SAFE--defaults-file=$MY_CNF  > /dev/null& while  [ $INIT_NUM -le 10 ]        do          PORTNUM=`netstat -lnt|grep${MYSQL_PORT}|wc -l`          echo "mysql启动中....请稍等..."          sleep 10          if [ $PORTNUM = 1  ];          then echo -e "\e[32m mysql                                      ****启动成功****\e[m"          exit 0          fi          INIT_NUM=$(($INIT_NUM +1))        done echo -e "\e[31m mysql启动失败或启动时间过长,请检查错误日志 `echo 'cat ' ${ERRORLOG}` \e[m" echo"*****************************************" exit 0 fi END_RESTORE_TIME=`date +%F' '%T' '%w` echo "数据库还原完成于:$END_RESTORE_TIME" exit 0