`
jieke_ZJ
  • 浏览: 45957 次
  • 性别: Icon_minigender_1
  • 来自: 深圳
社区版块
存档分类
最新评论

redis持久化方法对比分析

 
阅读更多

1、前言

最近在项目中使用到Redis做缓存,方便多个业务进程之间共享数据。由于Redis的数据都存放在内存中,如果没有配置持久化,redis重启后数据就全丢失了,于是需要开启redis的持久化功能,将数据保存到磁盘上,当redis重启后,可以从磁盘中恢复数据。redis提供两种方式进行持久化,一种是RDB持久化(原理是将Reids在内存中的数据库记录定时dump到磁盘上的RDB持久化),另外一种是AOF持久化(原理是将Reids的操作日志以追加的方式写入文件)。那么这两种持久化方式有什么区别呢,改如何选择呢?网上看了大多数都是介绍这两种方式怎么配置,怎么使用,就是没有介绍二者的区别,在什么应用场景下使用。

2、二者的区别

RDB持久化是指在指定的时间间隔内将内存中的数据集快照写入磁盘,实际操作过程是fork一个子进程,先将数据集写入临时文件,写入成功后,再替换之前的文件,用二进制压缩存储。

<iframe id="iframe_0.4410975455999979" style="margin: 0px; padding: 0px; border: none; width: 520px; height: 257px;" src="data:text/html;charset=utf8,%3Cstyle%3Ebody%7Bmargin:0;padding:0%7D%3C/style%3E%3Cimg%20id=%22img%22%20src=%22http://img1.tuicool.com/NjYjYvF.png!web?_=6182478%22%20style=%22border:none;max-width:999px%22%3E%3Cscript%3Ewindow.onload%20=%20function%20()%20%7Bvar%20img%20=%20document.getElementById('img');%20window.parent.postMessage(%7BiframeId:'iframe_0.4410975455999979',width:img.width,height:img.height%7D,%20'http://www.cnblogs.com');%7D%3C/script%3E" frameborder="0" scrolling="no"></iframe>

AOF持久化以日志的形式记录服务器所处理的每一个写、删除操作,查询操作不会记录,以文本的方式记录,可以打开文件看到详细的操作记录。

<iframe id="iframe_0.2277937809664463" style="margin: 0px; padding: 0px; border: none; width: 550px; height: 70px;" src="data:text/html;charset=utf8,%3Cstyle%3Ebody%7Bmargin:0;padding:0%7D%3C/style%3E%3Cimg%20id=%22img%22%20src=%22http://img2.tuicool.com/YrqaY3f.png!web?_=6182478%22%20style=%22border:none;max-width:999px%22%3E%3Cscript%3Ewindow.onload%20=%20function%20()%20%7Bvar%20img%20=%20document.getElementById('img');%20window.parent.postMessage(%7BiframeId:'iframe_0.2277937809664463',width:img.width,height:img.height%7D,%20'http://www.cnblogs.com');%7D%3C/script%3E" frameborder="0" scrolling="no"></iframe>

3、二者优缺点

RDB存在哪些优势呢?

1). 一旦采用该方式,那么你的整个Redis数据库将只包含一个文件,这对于文件备份而言是非常完美的。比如,你可能打算每个小时归档一次最近24小时的数据,同时还要每天归档一次最近30天的数据。通过这样的备份策略,一旦系统出现灾难性故障,我们可以非常容易的进行恢复。

2). 对于灾难恢复而言,RDB是非常不错的选择。因为我们可以非常轻松的将一个单独的文件压缩后再转移到其它存储介质上。

3). 性能最大化。对于Redis的服务进程而言,在开始持久化时,它唯一需要做的只是fork出子进程,之后再由子进程完成这些持久化的工作,这样就可以极大的避免服务进程执行IO操作了。

4). 相比于AOF机制,如果数据集很大,RDB的启动效率会更高。

RDB又存在哪些劣势呢?

1). 如果你想保证数据的高可用性,即最大限度的避免数据丢失,那么RDB将不是一个很好的选择。因为系统一旦在定时持久化之前出现宕机现象,此前没有来得及写入磁盘的数据都将丢失。

2). 由于RDB是通过fork子进程来协助完成数据持久化工作的,因此,如果当数据集较大时,可能会导致整个服务器停止服务几百毫秒,甚至是1秒钟。

AOF的优势有哪些呢?

1). 该机制可以带来更高的数据安全性,即数据持久性。Redis中提供了3中同步策略,即每秒同步、每修改同步和不同步。事实上,每秒同步也是异步完成的,其效率也是非常高的,所差的是一旦系统出现宕机现象,那么这一秒钟之内修改的数据将会丢失。而每修改同步,我们可以将其视为同步持久化,即每次发生的数据变化都会被立即记录到磁盘中。可以预见,这种方式在效率上是最低的。至于无同步,无需多言,我想大家都能正确的理解它。

2). 由于该机制对日志文件的写入操作采用的是append模式,因此在写入过程中即使出现宕机现象,也不会破坏日志文件中已经存在的内容。然而如果我们本次操作只是写入了一半数据就出现了系统崩溃问题,不用担心,在Redis下一次启动之前,我们可以通过redis-check-aof工具来帮助我们解决数据一致性的问题。

3). 如果日志过大,Redis可以自动启用rewrite机制。即Redis以append模式不断的将修改数据写入到老的磁盘文件中,同时Redis还会创建一个新的文件用于记录此期间有哪些修改命令被执行。因此在进行rewrite切换时可以更好的保证数据安全性。

4). AOF包含一个格式清晰、易于理解的日志文件用于记录所有的修改操作。事实上,我们也可以通过该文件完成数据的重建。

AOF的劣势有哪些呢?

1). 对于相同数量的数据集而言,AOF文件通常要大于RDB文件。RDB 在恢复大数据集时的速度比 AOF 的恢复速度要快。

2). 根据同步策略的不同,AOF在运行效率上往往会慢于RDB。总之,每秒同步策略的效率是比较高的,同步禁用策略的效率和RDB一样高效。

二者选择的标准,就是看系统是愿意牺牲一些性能,换取更高的缓存一致性(aof),还是愿意写操作频繁的时候,不启用备份来换取更高的性能,待手动运行save的时候,再做备份(rdb)。rdb这个就更有些 eventually consistent的意思了。

4、常用配置

RDB持久化配置

Redis会将数据集的快照dump到dump.rdb文件中。此外,我们也可以通过配置文件来修改Redis服务器dump快照的频率,在打开6379.conf文件之后,我们搜索save,可以看到下面的配置信息:

save 900 1              #在900秒(15分钟)之后,如果至少有1个key发生变化,则dump内存快照。

save 300 10            #在300秒(5分钟)之后,如果至少有10个key发生变化,则dump内存快照。

save 60 10000        #在60秒(1分钟)之后,如果至少有10000个key发生变化,则dump内存快照。

AOF持久化配置

在Redis的配置文件中存在三种同步方式,它们分别是:

appendfsync always     #每次有数据修改发生时都会写入AOF文件。

appendfsync everysec  #每秒钟同步一次,该策略为AOF的缺省策略。

appendfsync no          #从不同步。高效但是数据不会被持久化。

5、参考资料

http://blog.csdn.net/jackpk/article/details/30073097

http://www.jb51.net/article/65264.htm

分享到:
评论

相关推荐

    Redis持久化、主从与哨兵架构详解(1)

    Redis持久化、主从与哨兵架构详解 Redis持久化是指将Redis中的数据保存到磁盘中,以便在Redis服务器重启或崩溃后可以恢复数据。Redis提供了两种持久化方式:RDB快照和AOFAppend-Only File。 RDB快照 RDB快照是...

    从源码解读redis持久化

    【Redis持久化机制详解】 Redis作为一种高性能的内存数据库,其数据存储在内存中,因此面临一个问题:当系统崩溃或服务器意外关机时,内存中的数据可能会丢失。为了解决这个问题,Redis提供了两种主要的持久化机制...

    redis可视化工具

    3. **持久化**:提供RDB和AOF两种持久化方式,确保数据安全。 4. **事务支持**:可以原子地执行多个操作。 5. **网络通信协议兼容**:使用简单明了的RESP(Redis序列化协议)与客户端交互。 **redis-desktop-...

    redis数据的两种持久化方式对比

    RDB方式是一种快照式的持久化方法,将某一时刻的数据持久化到磁盘中。 •redis在进行数据持久化的过程中,会先将数据写入到一个临时文件中,待持久化过程都结束了,才会用这个临时文件替换上次持久化好的文件。正是...

    redis持久化

    目录 介绍 rdb rdb原理 rdb触发条件 ...rdb实现持久化主要是将当前进程中的数据生成快照保存到硬盘上,在重启的时候读取硬盘上的数据(如果同时配置了aof,将会先执行aof策略,因为aof的实时性比较高

    Redis持久化RDB和AOF区别详解

    为了确保数据在服务器重启或异常情况下的安全,Redis提供了两种主要的持久化机制:RDB(Redis Database Persistence,即快照)和AOF(Append Only File,追加日志)。下面将详细解释这两种持久化方式的区别。 **RDB...

    tair与redis比较

    Tair支持持久化,通过fdb方式实现持久化,而Redis支持持久化,通过快照和AOF方式实现持久化。 在性能方面,Tair的吞吐量高达66000次/秒,而Redis的吞吐量高达60000次/秒。Tair支持缓存过期移除策略,而Redis支持...

    04_redis 数据持久化 和 lamp 环境搭建.docx

    #### 四、RDB 和 AOF 持久化对比 - **数据安全性**:AOF持久化通常比RDB持久化更安全,因为它能够记录每一次写操作,即使在断电情况下也能够通过回放AOF文件来恢复数据。 - **恢复速度**:RDB持久化恢复数据的速度...

    Redis持久化机制-浅入

    Redis持久化就是将数据存入磁盘,以保证数据在redis在崩溃时减小对数据的影响,redis提供两种持久化方式。 1.快照(snapshotting)方式RDB,RDB是redis默认的持久化方式,可以再redis.conf中配置其存储频度,如图: ...

    REDIS persistence -- Redis中国用户组(CRUG)1

    本文将对 Redis 持久化机制进行详细的介绍和比较。 RDB 持久化方式 RDB(Redis Database)持久化方式是 Redis 的一种默认持久化机制。这种机制可以在指定的时间间隔内对数据进行快照存储,生成一个紧凑的单一文件...

    Redis高并发高可用集群百万级秒杀实战(下).zip

    8-3 Redis8-4 Redis过期key清除策略两种持久化方案对比 9-1 微信红包原理业务探讨 9-2 微信红包数据库表设计 9-3 发红包接口实现 9-4 抢红包接口实现 9-5 技术角度分析以后我们应该怎么抢红包? 9-6 抢红包项目总结 ...

    Memcached Redis MongoDB对比

    Redis支持数据持久化,包括快照和AOF(Append Only File)两种方式。AOF提供了更可靠的持久化,但对性能有一定影响。Memcached本身不支持持久化,主要用于缓存,提升系统性能。MongoDB则在1.8版本之后支持了基于...

    redis校验工具redis-full-check

    4. **持久化检查**:验证 RDB 或 AOF 持久化文件的完整性,确保数据在系统崩溃后可以正确恢复。 5. **性能监控**:收集 Redis 实例的性能指标,如命令执行速度、网络 I/O 等,以便识别性能瓶颈。 6. **配置对比**...

    day68Redis高级day68Redis高级

    本文将详细介绍Redis高级技术,包括分布式缓存、Redis持久化和主从架构等。 分布式缓存 -- 基于Redis集群解决单机Redis存在的问题 单机的Redis存在四大问题: 1. Redis持久化 Redis持久化方案有两种:RDB持久化...

    redis-7.2.3.zip

    Redis是一款高性能的键值对数据库,它以C语言编写,被广泛应用于缓存、消息队列、数据持久化等多个场景。本次我们关注的是其Linux版本的最新发行版——redis-7.2.3.zip。这个压缩包包含了在Linux环境下运行Redis ...

    Redis核心技术解析-数据类型、持久化、集群、事务与问题应对

    接着介绍Redis的事物、持久化策略、主从复制、哨兵模式、集群搭建步骤,并讨论其应用场景和发展方向。此外,文档还提及了缓存的三大问题(缓存穿透、缓存击穿、缓存雪崩)及解决方案,包括分布式锁的设计实现。在...

    redis与memcached比较

    - **持久化**:Redis支持多种数据持久化策略,而Memcached不支持持久化,重启后数据丢失。 - **事务支持**:Redis支持事务,允许执行一系列操作作为单一操作,提高数据一致性。 - **复杂性**:Redis的功能更加强大,...

    memcache与redis的比较

    memcache与Redis的比较 ...memcache和Redis都是缓存解决方案,但它们有不同的设计理念和应用场景,Redis支持多种数据类型,持久化和事务等功能,而memcache则提供了简单的key-value存储和cas命令来保证并发访问一致性。

    redis介绍文档学习

    ### Redis介绍文档学习...以上就是关于Redis的基本介绍、特点、优势、与Memcached的对比、持久化机制、主从复制、哨兵以及集群架构的相关知识点。通过学习这些内容,初学者可以更好地理解Redis的工作原理和应用场景。

Global site tag (gtag.js) - Google Analytics