设为首页 收藏本站
查看: 896|回复: 0

[经验分享] redis持久化快速回忆手册

[复制链接]

尚未签到

发表于 2017-12-20 20:20:40 | 显示全部楼层 |阅读模式
Redis提供的持久化机制:
  1). RDB持久化:该机制是指在指定的时间间隔内将内存中的数据集快照写入磁盘。  
  2). AOF持久化:该机制将以日志的形式记录服务器所处理的每一个写操作,在Redis服务器启动之初会读取该文件来重新构建数据库,以保证启动后数据库中的数据是完整的。
  3). 无持久化:我们可以通过配置的方式禁用Redis服务器的持久化功能。
  4). 同时应用AOF和RDB。

快照(RDB)默认持久化方式

  将内存中数据以快照的方式写入二进制文件中,默认文件名为dump.rdb。可以通过配置设置redis服务器自动做快照持久化的方式。我们可以配置redis在n秒内如果超过了m个修改就自动做快照。  

snapshotting默认设置:  
save 900 1 #900秒内如果超过1个key被修改,则发起快照保存
  
save 300 10 #300秒内如果超过10个key被修改,则发起快照保存
  
save 60 10000
  


  对于Redis的服务进程而言,在开始持久化时,它唯一需要做的只是fork出子进程,子进程将快照数据写入到临时RDB文件中,当子进程完成数据写入操作后,再用临时文件替换老的文件,这样就可以极大的避免服务进程执行IO操作了。每次快照持久化都是将内存数据完整写入到磁盘一次,并不是增量的只同步增量数据。所以如果数据量大的话,写操作会比较多,必然会引起大量的磁盘IO操作,可能会严重影响性能。
  注意:快照方式是在一定间隔时间做一次,如果redis意外宕机,就会丢失最后一次快照后的所有数据的修改。
  对于灾难恢复而言,我们可以非常轻松的将一个单独的文件压缩后再转移到其它存储介质上。
  由于RDB是通过fork子进程来协助完成数据持久化工作的,如果当数据集较大时,可能会导致整个服务器停止服务几百毫秒,甚至是1秒钟。
日志追加方式(append-only file:aof)方式

  redis会将每一个收到的命令都通过write函数追加到命令中,当redis重新启动时会重新执行文件中保存的写命令来在内存中重建这个数据库的内容,这个文件在bin目录下:appendonly.aof。当然由于操作系统会在内核中缓存write做的修改,所以可能不是立即写到磁盘上,这样的持久化还是有可能丢失部分修改。但是可以通过配置文件告诉redis通过fsync函数强制操作系统写入到磁盘的时机。  

aof设置:  
appendonly yes //启动aof持久化方式有三种修改方式
  
#appendfsync always //收到写命令就立即写入到硬盘,效率最慢,但是保证完全持久化
  
#appendfsync everysec //每秒种就写入一次硬盘,在性能和持久化方面做了折中
  
#appendfsync no //完全依赖操作系统,性能最好,但是持久化没保证,不知道何时持久化
  


  事实上,每秒同步也是异步完成的,其效率也是非常高的,所差的是一旦系统出现宕机现象,那么这一秒钟之内修改的数据将会丢失。而每修改同步,我们可以将其视为同步持久化,即每次发生的数据变化都会被立即记录到磁盘中。可以预见,这种方式在效率上是最低的。
  由于该机制对日志文件的写入操作采用的是append模式,因此在写入过程中即使出现宕机现象,也不会破坏日志文件中已经存在的内容。然而如果我们本次操作只是写入了一半数据就出现了系统崩溃问题,不用担心,在Redis下一次启动之前,我们可以通过redis-check-
  如果日志过大,Redis可以自动启用rewrite机制。即Redis以append模式不断的将修改数据写入到老的磁盘文件中,同时Redis还会创建一个新的文件用于记录此期间有哪些修改命令被执行。因此在进行rewrite切换时可以更好的保证数据安全性。
  对于相同数量的数据集而言,AOF文件通常要大于RDB文件。日志追加的方式导致持久化文件会变得越来越大。例如调用incr intsmaze命令100次,文件中就保存了100条命令,其实有99条都是多余的。因为要恢复数据库状态其实文件中保存一条set intsmaze 100就可以了。为了压缩这种持久化方式的日志文件,redis提供了bgrewriteaof命令。收到此命令redis将使用与快照类似的方式将内存中的数据以命令的方式保存到临时文件中,最后替换原来的持久化日志文件。
  实际中使用always方式,开启了always方式,redis的并发量就会下去。实际生产中都不会用快照的方式。
Redis的数据备份:

    在Redis中我们可以通过copy的方式在线备份正在运行的Redis数据文件。这是因为RDB文件一旦被生成之后就不会再被修改。Redis每次都是将最新的数据dump到一个临时文件中,之后在利用rename函数原子性的将临时文件改名为原有的数据文件名。因此我们可以说,在任意时刻copy数据文件都是安全的和一致的。鉴于此,我们就可以通过创建cron job的方式定时备份Redis的数据文件,并将备份文件copy到安全的磁盘介质中。  原文和作者一起讨论: http://www.cnblogs.com/intsmaze/p/6818210.html
DSC0000.png

运维网声明 1、欢迎大家加入本站运维交流群:群②:261659950 群⑤:202807635 群⑦870801961 群⑧679858003
2、本站所有主题由该帖子作者发表,该帖子作者与运维网享有帖子相关版权
3、所有作品的著作权均归原作者享有,请您和我们一样尊重他人的著作权等合法权益。如果您对作品感到满意,请购买正版
4、禁止制作、复制、发布和传播具有反动、淫秽、色情、暴力、凶杀等内容的信息,一经发现立即删除。若您因此触犯法律,一切后果自负,我们对此不承担任何责任
5、所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其内容的准确性、可靠性、正当性、安全性、合法性等负责,亦不承担任何法律责任
6、所有作品仅供您个人学习、研究或欣赏,不得用于商业或者其他用途,否则,一切后果均由您自己承担,我们对此不承担任何法律责任
7、如涉及侵犯版权等问题,请您及时通知我们,我们将立即采取措施予以解决
8、联系人Email:admin@iyunv.com 网址:www.yunweiku.com

所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其承担任何法律责任,如涉及侵犯版权等问题,请您及时通知我们,我们将立即处理,联系人Email:kefu@iyunv.com,QQ:1061981298 本贴地址:https://www.yunweiku.com/thread-426194-1-1.html 上篇帖子: Redis在C#中的使用及Redis的封装 下篇帖子: Java 使用Jedis连接Redis数据库(
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

扫码加入运维网微信交流群X

扫码加入运维网微信交流群

扫描二维码加入运维网微信交流群,最新一手资源尽在官方微信交流群!快快加入我们吧...

扫描微信二维码查看详情

客服E-mail:kefu@iyunv.com 客服QQ:1061981298


QQ群⑦:运维网交流群⑦ QQ群⑧:运维网交流群⑧ k8s群:运维网kubernetes交流群


提醒:禁止发布任何违反国家法律、法规的言论与图片等内容;本站内容均来自个人观点与网络等信息,非本站认同之观点.


本站大部分资源是网友从网上搜集分享而来,其版权均归原作者及其网站所有,我们尊重他人的合法权益,如有内容侵犯您的合法权益,请及时与我们联系进行核实删除!



合作伙伴: 青云cloud

快速回复 返回顶部 返回列表