`

Redis利用持久化进行数据迁移

阅读更多
前言

      Redis是一个开源的高性能键值对数据库。它通过提供多种键值数据类型来适应不同场景下的存储需求,并借助许多高层级的接口使其可以胜任如缓存、队列系统等不同的角色。

Redis持久化了解

      为了让性能更加优异,Redis默认是把所有的数据都存在内存中的。但是当服务器重启或程序异常崩溃时,Redis的数据就会全部丢失。因此出现了持久化的概念。持久化就是将存在内存中的数据同步到磁盘来保证持久化。

1、Redis持久化的方式
    两种: RDB 和 AOF

      RDB 持久化可以在指定的时间间隔内生成数据集的时间点快照(point-in-time snapshot)。

      AOF 持久化记录服务器执行的所有写操作命令,并在服务器启动时,通过重新执行这些命令来还原数据集。 AOF 文件中的命令全部以 Redis 协议的格式来保存,新命令会被追加到文件的末尾。 Redis 还可以在后台对 AOF 文件进行重写(rewrite),使得 AOF 文件的体积不会超出保存数据集状态所需的实际大小。

2、持久化的数据有什么用?
      用于重启后的数据恢复。Redis是一个内存数据库,无论是RDB还是AOF,都只是其保证数据恢复的措施;所以Redis在利用RDB和AOF进行恢复的时候,都会读取RDB或AOF文件,重新加载到内存中。

默认持久化了解

        其中RDB就是point-in-time snapshot快照存储,也是默认的持久化方式。对于RDB可理解为半持久化模式,即按照一定的策略周期性的将数据保存到磁盘。对应产生的数据文件为dump.rdb,通过配置文件中的save参数来定义快照的周期。Redis的RDB文件不会坏掉,因为其写操作是在一个新进程中进行的。

默认的持久化设置:
save 900 1                          #当有一条Keys数据被改变时,900秒刷新到Disk一次
save 300 10                        #当有10条Keys数据被改变时,300秒刷新到Disk一次
save 60 10000                    #当有10000条Keys数据被改变时,60秒刷新到Disk一次

利用持久化迁移数据
##########查看配置信息及当前存储的key值###########
[root@web-yv2 ~]# redis-cli -h 10.160.35.86 -p 6379
redis 10.160.35.86:6379> info
redis_version:2.4.10
redis_git_sha1:00000000
redis_git_dirty:0
arch_bits:64
multiplexing_api:epoll
gcc_version:4.4.6
process_id:11911
uptime_in_seconds:2154256
uptime_in_days:24
lru_clock:1527581
used_cpu_sys:1145.31
used_cpu_user:1430.18
used_cpu_sys_children:56.20
used_cpu_user_children:207.71
connected_clients:147
connected_slaves:0
client_longest_output_list:0
client_biggest_input_buf:0
blocked_clients:12
used_memory:6762928
used_memory_human:6.45M
used_memory_rss:19816448
used_memory_peak:10441776
used_memory_peak_human:9.96M
mem_fragmentation_ratio:2.93
mem_allocator:jemalloc-2.2.5
loading:0
aof_enabled:0
changes_since_last_save:166
bgsave_in_progress:0
last_save_time:1420367541
bgrewriteaof_in_progress:0
total_connections_received:1387982
total_commands_processed:25568539
expired_keys:1838499
evicted_keys:0
keyspace_hits:529489
keyspace_misses:1838207
pubsub_channels:0
pubsub_patterns:0
latest_fork_usec:947
vm_enabled:0
role:master
db0:keys=18255,expires=17326
#########保存最新的key值################
redis 10.160.35.86:6379> BGSAVE
Background saving started
##########查看是否保存成功##############
redis 10.160.35.86:6379> LASTSAVE
(integer) 1420367903
##########关闭redis服务器##############
redis-cli -h 10.160.35.86 -p 6379 SHUTDOWN
#########查看Redis的RDB文件###########
[root@web-yv2 ~]# grep "dir" /etc/redis.conf        #查看RDB文件的存放位置
# The working directory.
# The DB will be written inside this directory, with the filename specified
# above using the 'dbfilename' configuration directive.
# Also the Append Only File will be created inside this directory.
# Note that you must specify a directory here, not a file name.
dir /var/lib/redis/                                #RDB文件存放于此
# directive below) it is possible to tell the slave to authenticate before
# using the following configuration directive.
# the swap file under /tmp is not secure. Create a dir with access granted
# configuration directives.
[root@web-yv2 ~]# find / -name dump.rdb            #查找dump文件
/var/lib/redis/dump.rdb
##########压缩redis文件并拷入另一台机器#########
[root@web-yv2 ~]# tar zcvf redis.tar.gz /var/lib/redis
[root@web-yv2 ~]# scp redis.tar.gz root@10.160.35.67:/var/lib/
#########登陆10.160.35.67机器并做相应配置#######
[root@web-yv1 ~]# vi /etc/redis.conf
dir /var/lib/redis/                  #指定RDB文件路径
#########解压缩RDB文件##########################
[root@web-yv1 ~]# cd /var/lib/
[root@web-yv1 ~]# tar xf redis.tar.gz
#########重启Redis服务器########################
[root@web-yv1 ~]# service redis restart

附加信息

Redis–BGSAVE
在后台异步(Asynchronously)保存当前数据库的数据到磁盘。
BGSAVE 命令执行之后立即返回 OK ,然后 Redis fork 出一个新子进程,原来的 Redis 进程(父进程)继续处理客户端请求,而子进程则负责将数据保存到磁盘,然后退出。
客户端可以通过 LASTSAVE 命令查看相关信息,判断 BGSAVE 命令是否执行成功。
请移步 持久化文档 查看更多相关细节。
可用版本:>= 1.0.0时间复杂度:O(N), N 为要保存到数据库中的 key 的数量。返回值:反馈信息。
redis> BGSAVE
Background saving started

Redis–LASTSAVE
LASTSAVE
返回最近一次 Redis 成功将数据保存到磁盘上的时间,以 UNIX 时间戳格式表示。
可用版本:>= 1.0.0时间复杂度:O(1)返回值:一个 UNIX 时间戳。
redis> LASTSAVE
(integer) 1324043588
分享到:
评论

相关推荐

    Redis数据导入导出以及数据迁移的4种方法详解

    RDB 是 Redis 默认的持久化方式,会在指定条件或手动触发时生成一个包含当前数据库状态的文件。迁移 RDB 文件的步骤相对简单,主要包括: 1. 在源 Redis 实例上生成 RDB 文件。 2. 将 RDB 文件传输至目标 Redis 实例...

    redis 可持久化 Key-Value数据库

    RDB是在特定时间点对数据库进行快照保存,生成一个纯二进制文件,这种方式持久化效率高,恢复速度快,但可能会丢失最近的一小部分数据。AOF则是记录所有写操作的日志,每次操作都追加到文件末尾,确保了数据的完整性...

    memcached数据完整迁移到redis

    Redis 提供了多种持久化策略(RDB 和 AOF),确保数据安全。 2. **丰富的数据结构**:Redis 支持更多类型的数据结构,适合更复杂的应用场景。 3. **事务支持**:Redis 提供事务功能,可以确保一系列操作的原子性。 4...

    02-Redis持久化、主从与哨兵架构详解.zip

    Redis是一款高性能的键值对内存数据库,常用于缓存、消息队列以及数据持久化等场景。本资料包主要探讨Redis的三个核心概念:持久化、主从复制和哨兵架构,这些都是确保Redis高可用性和数据安全的重要机制。 首先,...

    Redis持久化以及集群部署

    RDB 是 Redis 默认的持久化方式,它会在指定的时间点创建数据集的快照。通过执行 `SAVE` 或者 `BGSAVE` 命令来触发。`BGSAVE` 会在后台异步执行,不会阻塞主进程。 - **优点**: - 数据恢复速度快,重启后可以直接...

    Redis的持久化方案.docx

    Redis的持久化是确保在系统崩溃或意外重启后能够恢复数据的关键特性。它提供了两种主要的持久化方案:RDB(Redis DataBase)和AOF(Append Only File)。这两种方法各有特点,适用于不同的场景。 **RDB详解** RDB是...

    redis 和 redis 可视化工具

    Redis 使用内存存储数据,并定期将其持久化到磁盘,以防止数据丢失。其支持多种数据类型,包括字符串、哈希、列表、集合、有序集合等,这为开发人员提供了极大的灵活性。 标题提及的“Redis 可视化工具”是用于帮助...

    redis web 可视化工具

    它的高性能得益于内存中的数据存储,同时也支持持久化到磁盘,保证了数据的安全性。 2. **Redis 应用场景**:Redis 常用于实时数据分析、网页会话管理、社交网络、发布/订阅系统等。由于其速度快,适用于需要高频...

    redis+可视化工具

    6. 备份恢复:对数据进行备份,并在需要时恢复。 7. 导入导出:将数据从一个Redis实例迁移到另一个,或保存为文件格式。 使用Redis可视化工具可以帮助开发者更好地理解数据结构,定位问题,以及进行性能优化。在...

    Redis Desktop Manager redis的可视化工具压缩包,解压即用

    它的核心特性包括支持多种数据结构(如字符串、哈希、列表、集合、有序集合),以及丰富的事务、持久化、复制和LUA脚本功能。由于其快速响应和轻量级的内存存储方式,Redis在Web应用程序、实时分析和分布式系统等...

    Redis 图形化客户端

    Redis是一个高性能的键值存储系统,广泛应用于缓存、消息队列、数据持久化等多个场景。使用图形化客户端可以大大简化对Redis的操作,提高工作效率。例如,`resp-2022.2.0.0.exe`可能是一款名为RESP(Redis Enhanced ...

    postgresql数据快速倒入redis

    因此,需要合理规划Redis的内存使用,或者结合持久化策略(如RDB和AOF)来平衡内存和磁盘资源。 - **错误处理**:处理查询错误、网络中断和导入失败的情况,确保程序的健壮性。 最后,`pg2redis-c++`这个文件可能是...

    tair与redis比较

    Tair支持缓存过期移除策略,而Redis支持缓存数据方式持久化和非持久化两种。Tair支持key/value和关系数据库两种数据方式,而Redis支持key/value方式。 Tair和Redis都是分布式缓存系统,但它们有不同的架构、功能和...

    Redis桌面管理工具(数据可视化):Another-Redis-Desktop-Manager(Windows)

    Redis是一款高性能的键值对数据库,常用于数据缓存、消息队列以及持久化存储等场景。在管理和操作Redis数据库时,使用一个直观且功能强大的桌面管理工具是必不可少的,Another-Redis-Desktop-Manager(ARDM)就是...

    Redis可视化工具Redis Desktop Manager

    它以内存为主,可持久化到磁盘,支持多种数据结构如字符串、哈希、列表、集合和有序集合等。Redis因其高性能、低延迟和丰富的功能而广泛应用于缓存、消息队列、分布式锁等多种场景。 **2. Redis Desktop Manager...

    redis可视化工具 解压即用

    Redis是一款高性能的键值对数据库,常用于数据缓存、消息队列以及持久化存储等场景。为了方便管理和操作Redis数据库,出现了各种可视化工具,其中“Redis Desktop Manager”是一款受到广泛使用的跨平台Redis管理工具...

    redis远程连接可视化工具

    Redis是一款高性能的键值对数据库,常用于存储缓存数据或实现消息队列等功能。在进行Redis开发和管理时,远程...在实际工作中,结合Redis的持久化、主从复制、哨兵系统和Cluster集群等特性,这款工具能发挥更大的作用。

    linux系统redis免安装版

    - Redis提供持久化功能,可以将内存中的数据定期保存到磁盘,防止数据丢失。 - 它还支持发布/订阅模式,可作为消息队列使用,进行进程间通信。 - Redis支持事务处理,确保一系列操作的原子性。 2. **免安装版的...

    redis客户端连接工具 RedisDesktopManager

    4. **数据导入导出**:用户可以将Redis中的数据导出为文件,或者导入文件到Redis,便于数据迁移和备份。 5. **命令行支持**:除了图形界面,RedisDesktopManager还提供了命令行窗口,允许用户输入Redis命令进行更...

Global site tag (gtag.js) - Google Analytics