设为首页 收藏本站
查看: 6863|回复: 0

[经验分享] 利用SELECT ... OUTFILE来备份MySQL数据库

[复制链接]

尚未签到

发表于 2018-9-28 12:02:28 | 显示全部楼层 |阅读模式
我写这个脚本的目的是利用MySQL的select * from tablename into outfile ...语句来备份MySQL数据库,虽然没有MYSQLDUMP导出数据快,可是恢复的时候却非常快。  注意:
  1)、我这个不包含表结构的备份,所以如果用之前先备份一下表结构。
  2)、运行此脚本的用户必须具有select,insert,以及GLOBAL的FILE权限。
  3)、注意导入时候的字符集要跟你的库一致。
  1、备份脚本内容:
  [root@localhost mysql]# cat fast_full_backup
  #!/bin/sh
  #
  # Created by david yeung.
  #
  # 20080707.
  #
  # Use outfile syntax to backup mysql's full data.
  #
  DBNAME=$1
  BACKUPDIR=/home/mysql/backup
  USERNAME=backup_file_user
  PASSWD=123456
  TARNAME=$1`date '+%Y%m%d'`.tar
  # Add your own database name here.
  case "$1" in
  t_girl);;
  *) exit;;
  esac
  # Get all the tables' name.
  NUM=`/usr/local/mysql/bin/mysql -u$USERNAME -p$PASSWD -s -vv -e "show tables" -D $DBNAME|wc -l`
  HEADNUM=`expr ${NUM} - 3`
  TAILNUM=`expr ${NUM} - 7`
  ARR1=`/usr/local/mysql/bin/mysql -u$USERNAME -p$PASSWD -s -vv -e "show tables" -D $DBNAME| head -n"$HEADNUM" | tail -n "$TAILNUM"`
  ARR2=($ARR1)
  i=0
  while [ "$i" -lt "${#ARR2[@]}" ]
  do
  tmpFileName=${ARR2[$i]}
  # The real dump process.
  /usr/local/mysql/bin/mysql -u$USERNAME -p$PASSWD -D$DBNAME -vv -e "select * from $tmpFileName into outfile '"$BACKUPDIR/$tmpFileName".dat' fields terminated by ',' enclosed by '\"' lines terminated by '\n'"
  let "i++"
  done
  # Compress all the files.
  #
  cd $BACKUPDIR
  tar cvf $TARNAME `ls *.dat`
  gzip -f $TARNAME
  rm -rf *.dat
  2、恢复脚本内容:
  [root@localhost mysql]# cat fast_full_recovery
  #!/bin/sh
  #
  # Created by david yeung.
  #
  # 20080707.
  #
  # Use outfile syntax to restore mysql's full data.
  #
  DBNAME=$1
  GZNAME=$2
  GZDIR=`dirname $GZNAME`
  USERNAME=backup_file_user
  PASSWD=123456
  if [ -z ${DBNAME} ]
  then
  exit
  fi
  if [ -z ${GZNAME} ]
  then
  exit
  fi
  TARNAME=`gzip -l "$GZNAME" | awk '{ print $4 }'|tail -n1`
  gzip -d "$GZNAME"
  tar xvf "$TARNAME" -C "$GZDIR"
  ARR1=(`ls "$GZDIR" | grep '.dat' | grep -v 'grep'`)
  i=0
  while [ "$i" -lt "${#ARR1[@]}" ]
  do
  TMPFILENAME=${ARR1[$i]}
  TBNAME=`echo $TMPFILENAME | cut -d '.' -f1`
  /usr/local/mysql/bin/mysql -u$USERNAME -p$PASSWD -D$DBNAME -vv -e "load data infile '"$GZDIR"/$TMPFILENAME' ignore into table "$TBNAME" character set utf8 fields terminated by ',' enclosed by '\"' lines terminated by '\n'"
  let "i++"
  done
  rm -rf "$GZDIR"/*.dat
  3、实际运行例子:
  1)、备份过程:
  [root@localhost mysql]# ./fast_full_backup t_girl
  --------------
  select* from admin into outfile '/home/mysql/backup/admin.dat' fieldsterminated by ',' enclosed by '"' lines terminated by '\n'
  --------------
  Query OK, 0 rows affected (0.00 sec)
  Bye
  ...
  Bye
  --------------
  select * from ww into outfile '/home/mysql/backup/ww.dat' fields terminated by ',' enclosed by '"' lines terminated by '\n'
  --------------
  Query OK, 9 rows affected (0.00 sec)
  Bye
  admin.dat
  ...
  ww.dat
  [root@localhost mysql]#
  2)、恢复过程:
  [root@localhost mysql]# ./fast_full_recovery t_girl /home/mysql/backup/t_girl20080707.tar.gz
  admin.dat
  ...
  ww.dat
  --------------
  loaddata infile '/home/mysql/backup/admin.dat' ignore into table admincharacter set utf8 fields terminated by ',' enclosed by '"' linesterminated by '\n'
  --------------
  Query OK, 0 rows affected (0.00 sec)
  Records: 0  Deleted: 0  Skipped: 0  Warnings: 0
  Bye
  ...
  Query OK, 9 rows affected, 3 warnings (0.00 sec)
  Records: 9  Deleted: 0  Skipped: 0  Warnings: 0
  Bye
  [root@localhost mysql]#
  4、与MYSQLDUMP导出导入时间比较:
  前提:2G的数据量。
  1)、用OUTFILE 方式花费。
  导出:
  real    5m19.003s
  user    2m20.211s
  sys     0m11.053s
  导入:
  real    6m28.006s
  user    0m19.723s
  sys     0m13.647s
  2)、用MYSQLDUMP 方式花费。
  导出:
  real    4m16.682s
  user    2m52.976s
  sys     0m13.026s
  导入:
  real    7m49.480s
  user    1m2.702s
  sys     0m10.545s


运维网声明 1、欢迎大家加入本站运维交流群:群②:261659950 群⑤:202807635 群⑦870801961 群⑧679858003
2、本站所有主题由该帖子作者发表,该帖子作者与运维网享有帖子相关版权
3、所有作品的著作权均归原作者享有,请您和我们一样尊重他人的著作权等合法权益。如果您对作品感到满意,请购买正版
4、禁止制作、复制、发布和传播具有反动、淫秽、色情、暴力、凶杀等内容的信息,一经发现立即删除。若您因此触犯法律,一切后果自负,我们对此不承担任何责任
5、所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其内容的准确性、可靠性、正当性、安全性、合法性等负责,亦不承担任何法律责任
6、所有作品仅供您个人学习、研究或欣赏,不得用于商业或者其他用途,否则,一切后果均由您自己承担,我们对此不承担任何法律责任
7、如涉及侵犯版权等问题,请您及时通知我们,我们将立即采取措施予以解决
8、联系人Email:admin@iyunv.com 网址:www.yunweiku.com

所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其承担任何法律责任,如涉及侵犯版权等问题,请您及时通知我们,我们将立即处理,联系人Email:kefu@iyunv.com,QQ:1061981298 本贴地址:https://www.yunweiku.com/thread-603272-1-1.html 上篇帖子: MySQL中如何横向显示结果集 下篇帖子: 在MYSQL中快速创建空表
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

扫码加入运维网微信交流群X

扫码加入运维网微信交流群

扫描二维码加入运维网微信交流群,最新一手资源尽在官方微信交流群!快快加入我们吧...

扫描微信二维码查看详情

客服E-mail:kefu@iyunv.com 客服QQ:1061981298


QQ群⑦:运维网交流群⑦ QQ群⑧:运维网交流群⑧ k8s群:运维网kubernetes交流群


提醒:禁止发布任何违反国家法律、法规的言论与图片等内容;本站内容均来自个人观点与网络等信息,非本站认同之观点.


本站大部分资源是网友从网上搜集分享而来,其版权均归原作者及其网站所有,我们尊重他人的合法权益,如有内容侵犯您的合法权益,请及时与我们联系进行核实删除!



合作伙伴: 青云cloud

快速回复 返回顶部 返回列表