Redis有三种集群方式
主从复制,哨兵模式和Redis-Cluster集群。
1.1、主从复制
1.1.1、主从复制原理
1. 从服务器连接主服务器,发送SYNC(同步)命令;
2. 主服务器接收到SYNC命名后,开始执行BGSAVE命令生成RDB文件并使用缓冲区记录此后执行的所有写命令;
3. 主服务器BGSAVE执行完后,向所有从服务器发送快照文件,并在发送期间继续记录被执行的写命令;
4. 从服务器收到快照文件后丢弃所有旧数据,载入收到的快照;
5. 主服务器快照发送完毕后开始向从服务器发送缓冲区中的写命令;
6. 从服务器完成对快照的载入,开始接收命令请求,并执行来自主服务器缓冲区的写命令;(从服务器初始化完成)
7. 主服务器每执行一个写命令就会向从服务器发送相同的写命令,从服务器接收并执行收到的写命令(从服务器初始化完成后的操作)
1.1.2、主从复制优缺点:
优点:
支持主从复制,主机会自动将数据同步到从机,可以进行读写分离
为了分载Master的读操作压力,Slave服务器可以为客户端提供只读操作的服务,写服务仍然必须由Master来完成
Slave同样可以接受其它Slaves的连接和同步请求,这样可以有效的分载Master的同步压力。
Master Server是以非阻塞的方式为Slaves提供服务。所以在Master-Slave同步期间,客户端仍然可以提交查询或修改请求。
Slave Server同样是以非阻塞的方式完成数据同步。在同步期间,如果有客户端提交查询请求,Redis则返回同步之前的数据
缺点:
Redis不具备自动容错和恢复功能,主机从机的宕机都会导致前端部分读写请求失败,需要等待机器重启或者手动切换前端的IP才能恢复。
主机宕机,宕机前有部分数据未能及时同步到从机,切换IP后还会引入数据不一致的问题,降低了系统的可用性。
Redis较难支持在线扩容,在集群容量达到上限时在线扩容会变得很复杂。
1.2、哨兵模式
1.2.1、哨兵模式原理:
当主服务器中断服务后,可以将一个从服务器升级为主服务器,以便继续提供服务,但是这个过程需要人工手动来操作。 为此,Redis 2.8中提供了哨兵工具来实现自动化的系统监控和故障恢复功能。
哨兵的作用就是监控Redis系统的运行状况。它的功能包括以下两个。
(1)监控主服务器和从服务器是否正常运行。
(2)主服务器出现故障时自动将从服务器转换为主服务器。
1.2.2、哨兵的工作方式:
a. 每个Sentinel(哨兵)进程以每秒钟一次的频率向整个集群中的Master主服务器,Slave从服务器以及其他Sentinel(哨兵)进程发送一个 PING 命令。
b. 如果一个实例(instance)距离最后一次有效回复 PING 命令的时间超过 down-after-milliseconds 选项所指定的值, 则这个实例会被 Sentinel(哨兵)进程标记为主观下线(SDOWN)
c. 如果一个Master主服务器被标记为主观下线(SDOWN),则正在监视这个Master主服务器的所有 Sentinel(哨兵)进程要以每秒一次的频率确认Master主服务器的确进入了主观下线状态
d. 当有足够数量的 Sentinel(哨兵)进程(大于等于配置文件指定的值)在指定的时间范围内确认Master主服务器进入了主观下线状态(SDOWN), 则Master主服务器会被标记为客观下线(ODOWN)
e. 在一般情况下, 每个 Sentinel(哨兵)进程会以每 10 秒一次的频率向集群中的所有Master主服务器、Slave从服务器发送 INFO 命令。
f. 当Master主服务器被 Sentinel(哨兵)进程标记为客观下线(ODOWN)时,Sentinel(哨兵)进程向下线的 Master主服务器的所有 Slave从服务器发送 INFO 命令的频率会从 10 秒一次改为每秒一次。
g. 若没有足够数量的 Sentinel(哨兵)进程同意 Master主服务器下线, Master主服务器的客观下线状态就会被移除。若 Master主服务器重新向 Sentinel(哨兵)进程发送 PING 命令返回有效回复,Master主服务器的主观下线状态就会被移除。
1.2.3、哨兵模式的优缺点
优点:
哨兵模式是基于主从模式的,所有主从的优点,哨兵模式都具有。
主从可以自动切换,系统更健壮,可用性更高。
缺点:
Redis较难支持在线扩容,在集群容量达到上限时在线扩容会变得很复杂。
1.3、Redis-Cluster集群
1.3.1、原理
redis的哨兵模式基本已经可以实现高可用,读写分离 ,但是在这种模式下每台redis服务器都存储相同的数据,很浪费内存,所以在redis3.0上加入了cluster模式,实现的redis的分布式存储,也就是说每台redis节点上存储不同的内容。
1.3.2、Redis-Cluster采用无中心结构,它的特点如下
1. 所有的redis节点彼此互联(PING-PONG机制),内部使用二进制协议优化传输速度和带宽。
2. 节点的fail是通过集群中超过半数的节点检测失效时才生效。
3. 客户端与redis节点直连,不需要中间代理层.客户端不需要连接集群所有节点,连接集群中任何一个可用节点即可。
1.3.3、工作方式:
在redis的每一个节点上,都有这么两个东西,一个是插槽(slot),它的的取值范围是:0-16383。还有一个就是cluster,可以理解为是一个集群管理的插件。当我们的存取的key到达的时候,redis会根据crc16的算法得出一个结果,然后把结果对 16384 求余数,这样每个 key 都会对应一个编号在 0-16383 之间的哈希槽,通过这个值,去找到对应的插槽所对应的节点,然后直接自动跳转到这个对应的节点上进行存取操作。
为了保证高可用,redis-cluster集群引入了主从模式,一个主节点对应一个或者多个从节点,当主节点宕机的时候,就会启用从节点。当其它主节点ping一个主节点A时,如果半数以上的主节点与A通信超时,那么认为主节点A宕机了。如果主节点A和它的从节点A1都宕机了,那么该集群就无法再提供服务了。
相关推荐
通过以上步骤,我们已经成功地在CentOS 6.5环境下搭建了一个包含6个节点(3主3从)的Redis集群。这种集群架构不仅可以提高系统的可伸缩性和可用性,还能够实现自动故障转移等高级特性。对于大型应用来说,这样的部署...
Redis 集群概述 Redis 集群是一种高可用性的 Redis 部署方式,通过将多个 Redis 节点组成集群,可以实现自动容错、负载均衡和高可用性。Redis 集群由多个主节点和从节点组成,主节点负责写入数据,而从节点负责同步...
### Redis集群搭建与简单使用详解 #### 一、概述 Redis 集群是一种通过分区数据来实现高可用性和水平扩展的技术。通过将数据分布在多个 Redis 实例中,集群能够提供更高的性能和更大的数据存储容量。本文档将详细...
Redis 集群是一种通过分区和分片技术实现的分布式存储方案,它可以提高数据处理能力和系统的高可用性。集群中的每个节点负责一部分数据集,并且可以通过复制机制确保数据冗余。 #### 官方文档 - **原版文档**: - ...
### Redis主从复制和集群配置详解 #### 一、Redis主从复制原理及配置 **1.1 概述** ...通过对主从复制的理解和合理配置,以及利用Sentinel的功能,可以有效地管理和监控Redis集群,确保系统的稳定运行。
- 哨兵可以作为客户端获取当前Redis集群状态的地方,包括当前的主服务器信息等。 #### 五、注意事项 - 在配置`sentinel monitor`时,最后一个参数`2`表示至少需要2个哨兵确认主服务器下线,才能进行故障转移。这...
"Redis集群和哨兵搭建文档" 本文档详细介绍了在 Linux 系统中搭建 Redis 集群和哨兵的步骤。Redis 是一个高性能的 key-value 数据库,遵守 BSD 协议,完全开源免费。 一、Redis 概述 Redis 是一个开源的、基于...
#### 一、Redis 概述 Redis (Remote Dictionary Server) 是一款开源的高性能键值对数据库。它以其卓越的性能和灵活性,在多种应用场景中发挥着重要作用,比如缓存、消息队列等。Redis 的主要特性包括: - **高性能...
#### 一、Redis集群概述与服务器说明 Redis集群是Redis的一种分布式部署方式,通过多个Redis实例组成集群,实现数据的高可用性和负载均衡。本部署文档介绍了一个由六台虚拟服务器组成的Redis集群,这些服务器运行于...
Redis集群采用了一种非常简洁高效的架构设计: 1. **PING-PONG机制**:所有节点之间通过PING-PONG机制保持连接,用于心跳检测和数据同步。 2. **节点故障检测**:节点的失效状态需要集群中超过半数的节点检测并确认...
同时,也会涉及到 Redis 的三种模式:单机模式、哨兵模式和集群模式。 一、Redis 概述 Redis 是一种基于内存的 NoSQL 数据库,具有高性能、低延迟和高可扩展性的特点。Redis 支持多种数据类型,包括字符串、哈希、...
#### 一、Redis 主从复制概述 Redis 主从复制是一种数据冗余机制,主要用于实现读写分离、负载均衡以及数据备份等目的。通过搭建主从复制集群,可以有效避免单点故障问题,并且能够满足读多写少的应用场景需求。 *...
【Redis集群概述】 Redis集群是Redis数据库的一种高可用性解决方案,它通过分布式的方式来提供服务,以提高系统的可扩展性和容错性。Redis集群遵循主从复制的架构,至少需要3个主节点,每个主节点有一个副本,即...
#### 一、Redis集群概述 Redis 集群是一种高可用性和高扩展性的解决方案,能够实现数据的分布式存储,并通过复制和故障转移等机制确保服务的持续可用。本文将详细介绍如何搭建Redis3集群,并对其中涉及的关键技术...
1. Redis集群概述 Redis集群是Redis提供的分布式数据库解决方案,它可以将数据自动切分到多个Redis节点上。集群通过分区来提供一定程度的可用性,在部分节点出现故障时仍然能够继续处理命令请求。对于Redis的集群...
目录redis-cluster-operator概述目录先决条件特征快速入门部署 redis 集群操作员逐步安装使用 helm chart 安装用法部署示例 Redis 集群扩展 Redis 集群缩小 Redis 集群备份和恢复普罗米修斯发现使用密码创建 Redis ...
#### 三、Redis集群测试 最后,可以通过以下命令测试Redis集群: 1. **连接集群**: ```bash cd REDIS_HOME/redis-4.0.2/bin ./redis-cli -c -p 7000 ``` 2. **写入键值对**: ```bash set key_21 70 ``` ...
1. **Redis 概述** Redis 起初被设计为一个远程字典服务器,随着时间的推移,它发展成为了一个功能丰富的持久化键值数据库。Redis 提供了丰富的数据结构支持,包括字符串、列表、集合、哈希表等,使得它能够满足...
#### 三、Redis集群架构与部署 Redis集群旨在提供高可用性和横向扩展能力,通过将数据分散到多个节点上来提高性能和可靠性。每个节点负责一部分哈希槽(hash slots),总共有16384个槽位。 ##### 集群部署流程: ...