`
zk_chs
  • 浏览: 215657 次
  • 性别: Icon_minigender_1
社区版块
存档分类
最新评论

redis cluster集群搭建

阅读更多

这次给大家带来的是redis cluster集群搭建。

 

1、首先,我们先根据文档建立6个文件夹,可以将目录cluster-test(文件夹名称及位置随意)建立在编译完成的redis根目录下,然后cd进入clustert-test,再创建7000-7005共6个文件夹,

mkdir cluster-test
cd cluster-test
mkdir 7000 7001 7002 7003 7004 7005

再为每个文件夹添加一个redis.conf文件,redis.conf文件从我们的redis根目录获取即可。

 

2、然后我们需要在redis.conf中对应的代码修改为如下形式:

port 7000
cluster-enabled yes
cluster-config-file nodes.conf
cluster-node-timeout 5000
appendonly yes

端口号从7000-7005依次配置即可

 

3、之后,我们需要分别启动6个redis,不过,首先需要进入redis.conf文件所在的目录,比如7000目录,然后再执行启动命令。

为什么这么做呢,其实运行之后再进入7000-7005文件夹一看就明白了,每个文件夹下面都产生了对应的一些文件,比如上面redis.conf配置第3行的nodes.conf,博主就被坑了下_(:з」∠)_......

启动命令:

cd 7000
redis-server ./redis.conf

redis-server为redis的启动命令,需要你自己添加到环境变量

 

 

4、现在需要安装redis的ruby模块,因为作者写的脚本需要

yum install ruby
yum install rubygems
gem install redis

然后进入redis的src目录,执行下列语句

./redis-trib.rb create --replicas 1 127.0.0.1:7000 127.0.0.1:7001 \
127.0.0.1:7002 127.0.0.1:7003 127.0.0.1:7004 127.0.0.1:7005

这样一来就完成了集群,6个redis为3主3从模式,

redis-cli -p 7000 cluster nodes

通过这条语句,能够输出主从关系

 

5、最后我们可以试验下了:

>redis-cli -c -h 127.0.0.1 -p 7000

注意,这里添加了参数-c,意思为进入集群模式。

127.0.0.1:7000> set a 10
-> Redirected to slot [15495] located at 127.0.0.1:7002

这里,a这个缓存经过计算后,落在了端口为7002的master上,slot为槽:

HASH_SLOT = CRC16(key) mod 16384

通过cluster nodes可以看到每个master对应的槽

127.0.0.1:7002> cluster nodes
b3b19495801d2bf7960ae857ac5acd41884ab20f 127.0.0.1:7000 slave ce09b994443852c51f75a82b032ee4a0c0a203c5 0 1458577108602 7 connected
3dff391695f54477b4290afe434b8bda4bfec4e2 127.0.0.1:7005 slave 3fcd607421bfe9be0f277653cfd924c2c6d1c3c7 0 1458577109102 6 connected
ce09b994443852c51f75a82b032ee4a0c0a203c5 127.0.0.1:7003 master - 0 1458577108100 7 connected 0-5460
56d52eb49e6f9bcd2652b7f4cc00028e28fb346c 127.0.0.1:7004 slave 5f29d9b84350df536d60a1b32d93196d2be1b338 0 1458577110103 5 connected
3fcd607421bfe9be0f277653cfd924c2c6d1c3c7 127.0.0.1:7002 myself,master - 0 0 3 connected 10923-16383
5f29d9b84350df536d60a1b32d93196d2be1b338 127.0.0.1:7001 master - 0 1458577108601 2 connected 5461-1092

细心的读者可以发现,我的7000为slave,7003为master,这是因为我把7000手动kill掉之后又再次启动了。

 

6、关于cluster的扩容:

再创建7006与7007两个服务,过程同上,之后执行:

./redis-trib.rb add-node 127.0.0.1:7006 127.0.0.1:7000

第一个地址为我们需要添加的节点,第二个为集群中任意一个有效节点,输出

>>> Adding node 127.0.0.1:7006 to cluster 127.0.0.1:7000
>>> Performing Cluster Check (using node 127.0.0.1:7000)
S: b3b19495801d2bf7960ae857ac5acd41884ab20f 127.0.0.1:7000
   slots: (0 slots) slave
   replicates ce09b994443852c51f75a82b032ee4a0c0a203c5
M: 5f29d9b84350df536d60a1b32d93196d2be1b338 127.0.0.1:7001
   slots:5461-10922 (5462 slots) master
   1 additional replica(s)
S: 56d52eb49e6f9bcd2652b7f4cc00028e28fb346c 127.0.0.1:7004
   slots: (0 slots) slave
   replicates 5f29d9b84350df536d60a1b32d93196d2be1b338
M: 3fcd607421bfe9be0f277653cfd924c2c6d1c3c7 127.0.0.1:7002
   slots:10923-16383 (5461 slots) master
   1 additional replica(s)
S: 3dff391695f54477b4290afe434b8bda4bfec4e2 127.0.0.1:7005
   slots: (0 slots) slave
   replicates 3fcd607421bfe9be0f277653cfd924c2c6d1c3c7
M: ce09b994443852c51f75a82b032ee4a0c0a203c5 127.0.0.1:7003
   slots:0-5460 (5461 slots) master
   1 additional replica(s)
[OK] All nodes agree about slots configuration.
>>> Check for open slots...
>>> Check slots coverage...
[OK] All 16384 slots covered.
>>> Send CLUSTER MEET to node 127.0.0.1:7006 to make it join the cluster.
[OK] New node added correctly.

再查看下主从状态:

127.0.0.1:7000> cluster nodes
b3b19495801d2bf7960ae857ac5acd41884ab20f 127.0.0.1:7000 myself,slave ce09b994443852c51f75a82b032ee4a0c0a203c5 0 0 1 connected
5f29d9b84350df536d60a1b32d93196d2be1b338 127.0.0.1:7001 master - 0 1458578163681 2 connected 5461-10922
56d52eb49e6f9bcd2652b7f4cc00028e28fb346c 127.0.0.1:7004 slave 5f29d9b84350df536d60a1b32d93196d2be1b338 0 1458578164182 5 connected
3fcd607421bfe9be0f277653cfd924c2c6d1c3c7 127.0.0.1:7002 master - 0 1458578163180 3 connected 10923-16383
3dff391695f54477b4290afe434b8bda4bfec4e2 127.0.0.1:7005 slave 3fcd607421bfe9be0f277653cfd924c2c6d1c3c7 0 1458578163681 6 connected
ce09b994443852c51f75a82b032ee4a0c0a203c5 127.0.0.1:7003 master - 0 1458578164182 7 connected 0-5460
88645a7e5d89fb66de5ae9d7a4b90324a8acb7d9 127.0.0.1:7006 master - 0 1458578164684 0 connecte

能够看到,7006已经成为了master,再将7007作为7006的slave加入集群:

./redis-trib.rb add-node --slave --master-id 88645a7e5d89fb66de5ae9d7a4b90324a8acb7d9 127.0.0.1:7007 127.0.0.1:7000

-slave 表示当前节点为slave,--master-id 表示作为谁的slave,然后进行确认:

127.0.0.1:7000> cluster nodes
b3b19495801d2bf7960ae857ac5acd41884ab20f 127.0.0.1:7000 myself,slave ce09b994443852c51f75a82b032ee4a0c0a203c5 0 0 1 connected
5f29d9b84350df536d60a1b32d93196d2be1b338 127.0.0.1:7001 master - 0 1458578725767 2 connected 5461-10922
56d52eb49e6f9bcd2652b7f4cc00028e28fb346c 127.0.0.1:7004 slave 5f29d9b84350df536d60a1b32d93196d2be1b338 0 1458578725265 5 connected
3fcd607421bfe9be0f277653cfd924c2c6d1c3c7 127.0.0.1:7002 master - 0 1458578725767 3 connected 10923-16383
7a4d3410f9b4f06733a08b79c2aa10a3762e565b 127.0.0.1:7007 slave 88645a7e5d89fb66de5ae9d7a4b90324a8acb7d9 0 1458578724264 0 connected
3dff391695f54477b4290afe434b8bda4bfec4e2 127.0.0.1:7005 slave 3fcd607421bfe9be0f277653cfd924c2c6d1c3c7 0 1458578724764 6 connected
ce09b994443852c51f75a82b032ee4a0c0a203c5 127.0.0.1:7003 master - 0 1458578724764 7 connected 0-5460
88645a7e5d89fb66de5ae9d7a4b90324a8acb7d9 127.0.0.1:7006 master - 0 1458578724264 0 connected

 这是7007已经成为了7006的slave了。

 

7、这时候又来了一个问题,就是7006并没有分配slot

所以,我们可以执行下列语句,重新划分slot:

> ./redis-trib.rb reshard 127.0.0.1:7000

中间会有几步选择:

How many slots do you want to move (from 1 to 16384)? 1000 // =========1
What is the receiving node ID? 88645a7e5d89fb66de5ae9d7a4b90324a8acb7d9 // =====2
Please enter all the source node IDs.
  Type 'all' to use all the nodes as source nodes for the hash slots.
  Type 'done' once you entered all the source nodes IDs.
Source node #1:all // ==========3
...
Do you want to proceed with the proposed reshard plan (yes/no)? yes // =======4

1、1000表示从现有的slot中取出1000个slot,

2、node ID表示1中slot转移到的节点(此处为7006),

3、source node表示从哪个节点取出这1000个slot分配给目标节点。验证:

127.0.0.1:7000> cluster nodes
b3b19495801d2bf7960ae857ac5acd41884ab20f 127.0.0.1:7000 myself,slave ce09b994443852c51f75a82b032ee4a0c0a203c5 0 0 1 connected
5f29d9b84350df536d60a1b32d93196d2be1b338 127.0.0.1:7001 master - 0 1458578948666 2 connected 5795-10922
56d52eb49e6f9bcd2652b7f4cc00028e28fb346c 127.0.0.1:7004 slave 5f29d9b84350df536d60a1b32d93196d2be1b338 0 1458578947665 5 connected
3fcd607421bfe9be0f277653cfd924c2c6d1c3c7 127.0.0.1:7002 master - 0 1458578949669 3 connected 11256-16383
7a4d3410f9b4f06733a08b79c2aa10a3762e565b 127.0.0.1:7007 slave 88645a7e5d89fb66de5ae9d7a4b90324a8acb7d9 0 1458578948165 9 connected
3dff391695f54477b4290afe434b8bda4bfec4e2 127.0.0.1:7005 slave 3fcd607421bfe9be0f277653cfd924c2c6d1c3c7 0 1458578949167 6 connected
ce09b994443852c51f75a82b032ee4a0c0a203c5 127.0.0.1:7003 master - 0 1458578948165 7 connected 333-5460
88645a7e5d89fb66de5ae9d7a4b90324a8acb7d9 127.0.0.1:7006 master - 0 1458578949167 9 connected 0-332 5461-5794 10923-11255

 可以看到,我们已经为7006节点分配了1000个slot了。

 

8、最后,就是删除节点了:

./redis-trib.rb del-node 127.0.0.1:7000 7a4d3410f9b4f06733a08b79c2aa10a3762e565b

del-node 表示删除节点,第一个参数为任意一个有效节点,第二个参数为要删除的目标节点的ID

只有空的master节点以及slave节点能够删除,否则需要先reshard,将目标master的slot全部转移掉才行,并且此时该node的slave会寻找其他的master。

 

删除节点还会将目标节点的redis服务停止,需要注意。

 

 

3
5
分享到:
评论
1 楼 mangguo 2016-03-23  
之前写过一个redis的入门,直接在线就可以练习。有空的可以看看,上面的内容可以直接试试。

http://www.hubwiz.com/course/?type=Redis

相关推荐

    RedisCluster集群搭建代码及相应软件

    RedisCluster是Redis官方提供的分布式集群解决方案,它通过数据分片技术实现了高可用性和可扩展性。RedisCluster将数据分散在多个节点上,每个节点存储一部分数据,并通过槽(slot)来管理和分配数据。这种方式允许...

    docker 实现redis集群搭建

    "docker 实现redis集群搭建" 一、Redis Cluster 概念 Redis Cluster 是 Redis 的分布式解决方案,旨在解决 Redis 单机中心化的问题。它将整个数据集按照分区规则映射到多个节点上,使得 Redis 能够水平扩展以应对...

    Redis Cluster集群的搭建与实践

    "Redis Cluster集群的搭建与实践" Redis Cluster集群是Redis的一个高可用性解决方案,它可以在多个Redis节点之间分配数据和状态,提供高性能和高可用性的数据存储服务。下面是Redis Cluster集群的主要知识点: 1. ...

    Redis官方Cluster搭建配置步骤详解

    Redis 集群是一个提供在多个Redis间节点间共享数据的程序集。 Redis集群并 不支持处理多个keys... 本文,是我自己写的Redis Cluster集群搭建和配置详细步骤,包含了常用的Redis配置文件,和节点的管理等,以供大家参考.

    Redis Cluster集群部署搭建详解附件

    本文将详细解析如何搭建Redis Cluster集群,包括集群的基本概念、配置、节点间通信以及常见问题处理。 一、Redis Cluster基础概念 1. 节点:每个运行Redis服务的实例称为一个节点,至少需要3个节点才能创建一个基本...

    rediscluster集群demo

    本示例“rediscluster集群demo”旨在展示如何设置和操作一个简单的Redis Cluster实例,确保在本地环境中的正确运行。 首先,Redis Cluster采用无中心架构,每个节点都是对等的,并且负责一部分数据。它通过槽(slot...

    Redis高可用集群Redis Cluster搭建

    Redis高可用集群Redis Cluster搭建 Redis高可用集群Redis Cluster搭建是 Redis 官方推荐的高可用性解决方案,于 3.0 版本推出。Redis Cluster 的主要用途是实现数据分片(Data Sharding),同时也可以实现高可用...

    redis3.0.0集群搭建

    在集群搭建过程中,Ruby的`redis-trib.rb`工具非常关键。确保你已经安装了Ruby,并通过Gem安装`redis`和`redis-trib`库: ```sh gem install redis gem install redis-trib ``` 接着,使用`redis-trib.rb`创建集群...

    新redis5.0.5集群搭建 by crj.docx

    Redis 5.0.5 集群搭建详解 Redis 是一个开源、基于内存的数据存储系统,提供了多种数据结构,如字符串、哈希表、列表、集合、有序集合等。Redis 的高性能和低延迟使其广泛应用于缓存、消息队列、数据存储等领域。...

    Windows下安装部署redis cluster

    Windows下安装部署redis cluster,亲测好使,包含 安装环境,redis-3.2.1.gem,redis cluster集群实例

    redis的集群搭建与简单使用

    ### Redis集群搭建与简单使用详解 #### 一、概述 Redis 集群是一种通过分区数据来实现高可用性和水平扩展的技术。通过将数据分布在多个 Redis 实例中,集群能够提供更高的性能和更大的数据存储容量。本文档将详细...

    php成功操作redis cluster集群的实例教程

    php操作Redis Cluster集群的实例教程涵盖了多个知识点,包括Redis Cluster集群的基本概念、PHP与Redis交互的不同方法以及如何使用Predis库与Redis Cluster集群进行通信。以下是详细介绍: 1. Redis Cluster概述: ...

    redis cluster 集群配置.conf简约版.zip

    Redis Cluster是Redis官方提供的分布式集群解决...配置过程虽然涉及多个步骤,但通过理解其核心概念和关键配置项,可以成功搭建并管理一个简约版的Redis Cluster。持续学习和实践,你将能更熟练地应对各种集群场景。

    redis集群搭建手册.docx

    **Redis集群搭建手册** Redis,全称Remote Dictionary Server,是一种高性能的键值对数据库,以其丰富的数据类型、高效的内存管理以及支持持久化等特性,在分布式系统中被广泛应用于缓存、消息中间件以及数据存储等...

    redis高可用笔记,包括RedisCluster集群方式和完全纯手写Redis缓存框架

    为了确保服务的稳定性和可靠性,Redis提供了多种高可用解决方案,其中最常见的是Redis Cluster集群模式以及自定义的手工搭建的缓存框架。下面将对这两个方面进行详细探讨。 ### Redis Cluster集群 Redis Cluster是...

    完整搭建redis-cluster

    **Redis Cluster 搭建全攻略** Redis 是一个高性能的键值存储系统,而 Redis Cluster 是它的分布式解决方案,提供数据的自动分片、故障转移和高可用性。本指南将详细讲解如何完整地搭建一个 Redis Cluster,同时...

    docker-compose一键搭建Redis集群

    1.先运行 createFile.py 输入宿主机IP地址,输入redis密码 2.按照控制台输出执行docker-compose up -d 启动命令 3.启动成功后执行加入集群命令即可

    Redis-Cluster 分布式集群.docx

    接下来,我们将深入探讨如何搭建一个Redis Cluster以及其关键操作。 首先,为了构建一个Redis Cluster,你需要至少三个物理节点或虚拟机,每个节点运行两个Redis实例,总共六个实例。在本例中,我们有节点192.168....

    rediscluster配置文件.zip

    这个压缩包文件"rediscluster配置文件.zip"包含了一系列配置文件,用于搭建一个三主三从的Redis Cluster架构。在这个架构中,每个主节点都有一个对应的从节点,确保在主节点失效时可以从其从节点接管服务,从而保持...

Global site tag (gtag.js) - Google Analytics