`

zookeeper适用场景:如何竞选Master及代码实现

 
阅读更多
zookeeper适用场景:如何竞选Master及代码实现
http://www.aboutyun.com/thread-9277-1-1.html


【zookeeper源代码分析系列】Zookeeper的Leader选举

http://www.douban.com/note/227624842/?type=like

【选举算法】
QuorumPeer.startLeaderElection
先获取选举算法配置electionType  -> config.getElectionAlg() -> electionAlg
QuorumPeer.createElectionAlgorithm根据electionAlg选择算法:
0对应的是LeaderElection算法
1对应的是AuthFastLeaderElection算法
2对应的是AuthFastLeaderElection算法
3对应的是FastLeaderElection算法.
默认使用FastLeaderElection算法
所有的选举算法都继承自Election接口,实现lookForLeader和shutdown。

【选举的网络通信】
选举算法的实现中,包含RecvWorker和SendWorker两个线程,负责选举过程中的消息的收发。
选举算法内部维护一下两个收发队列:
sendqueue = new LinkedBlockingQueue<ToSend>();
recvqueue = new LinkedBlockingQueue<Notification>();
具体的网络收发由QuorumCnxManager负责,发送通过toSend(),接受通过pollRecvQueue()。
发送:
    根据ToSend结构的sid,把请求发给对应id的server。sendNotifications里会给所有配置中sid轮流发送ToSend结构。
接收:

【几个概念】
logicalclock       -》逻辑时钟
Epoch              -》 epoch,zxid的高32,表示leader的变动
zxid                 -》 事务id号,每个操作都有一个zxid, 64位
server id          -》配置的myid,服务器编号



【FastLeaderElection】
中心思想:竞选阶段谁id大谁当leader
比较逻辑:FastLeaderElection.totalOrderPredicate,zxid和server id大者获胜

FastLeaderElection.sendNotifications广播出去

Fastleader选举例子,转的。
假设有五台服务器组成的zookeeper集群,它们的id从1-5,同时它们都是最新启动的,也就是没有历史数据,在存放数据量这一点上,都是一样的.假设这些服务器依序启动,来看看会发生什么.
1) 服务器1启动,此时只有它一台服务器启动了,它发出去的报没有任何响应,所以它的选举状态一直是LOOKING状态
2) 服务器2启动,它与最开始启动的服务器1进行通信,互相交换自己的选举结果,由于两者都没有历史数据,所以id值较大的服务器2胜出,但是由于没有达到超过半数以上的服务器都同意选举它(这个例子中的半数以上是3),所以服务器1,2还是继续保持LOOKING状态.
3) 服务器3启动,根据前面的理论分析,服务器3成为服务器1,2,3中的老大,而与上面不同的是,此时有三台服务器选举了它,所以它成为了这次选举的leader.
4) 服务器4启动,根据前面的分析,理论上服务器4应该是服务器1,2,3,4中最大的,但是由于前面已经有半数以上的服务器选举了服务器3,所以它只能接收当小弟的命了.
5) 服务器5启动,同4一样,当小弟.
分享到:
评论

相关推荐

    基于Zookeeper集群环境下的master选举代码

    该代码是基于zookeeper应用场景:master选举下的代码;使用了zookeeper的集群模式,可参考博客:https://blog.csdn.net/LiaoHongHB/article/details/84951540

    zookeeper系列1:入门

    Zookeeper是一款分布式协调服务,由Apache基金会开发,广泛应用于分布式系统中的数据共享、配置管理、命名服务、集群同步等场景。它的设计目标是简化分布式环境下的复杂问题,提供高可用性和一致性保障。 **1. ...

    Zookeeper入门指南:分布式配置中心和服务注册与发现

    使用场景及目标:适用于需要管理和维护分布式系统的开发者和技术人员,通过本文的学习可以掌握Zookeeper的基本使用方法及其在配置管理和服务发现方面的具体应用场景。 其他说明:文中详细讲解了Zookeeper的安装配置...

    ZooKeeper典型使用场景

    ### ZooKeeper典型使用场景详解 #### 一、概述 ZooKeeper是一款开源的分布式协调服务框架,主要用于解决分布式系统中的数据一致性问题。它基于Paxos算法实现,确保了即使在网络分区的情况下,也能保证分布式环境下...

    Zookeeper使用场景及详解

    ### Zookeeper使用场景及详解 #### 一、概述 Zookeeper是一个分布式的、开放源码的数据管理和协调服务框架。它最初是由雅虎研究院开发并开源的,后来成为了Apache的一个顶级项目。Zookeeper的设计目的是为了简化...

    zookeeper实战:ConfigServer代码样例

    1. 连接Zookeeper:首先,客户端需要连接到Zookeeper服务器,创建`ZooKeeper`对象,通常会指定服务器地址列表、会话超时时间等参数。 ```java ZooKeeper zookeeper = new ZooKeeper("localhost:2181", 3000, ...

    docker.io/dabealu/zookeeper-exporter:v0.1.13

    docker.io/dabealu/zookeeper-exporter:v0.1.13

    zookeeper-3.5.7:zookeeper原始码解析-源码解析

    阿帕奇ZooKeeper 有关Apache ZooKeeper的最新信息,请访问我们的网站: 和我们的Wiki,位于: 包装/发布文物 使用maven构建项目后,可以从下载或在zookeeper-assembly / target目录中找到。 apache-zookeeper-...

    实现zookeeper集群节点管理及Master选举完整示例java项目下载(含依赖jar包).txt

    该项目通过zookeeper三个节点Node服务客户端代码,实现zookeeper集群管理与Master选举功能示例,项目结构如下图所示,其中依赖包包含:log4j-1.2.14.jar、slf4j-api-1.7.2.jar、slf4j-log4j12-1.7.2.jar、zookeeper-...

    zookeeperMaster选举以及数据同步代码

    在这个"zookeeperMaster选举以及数据同步代码"项目中,我们将深入探讨Zookeeper如何进行主节点选举以及如何与MySQL数据库进行数据同步。 首先,我们要理解Zookeeper的Master选举机制。在分布式环境中,通常需要一个...

    第三课:zookeeper 典型使用场景实践1

    课程中给出了一个Java实现的代码示例,使用`ZkClient`库与Zookeeper交互。`Agent`类中包含了初始化Zookeeper连接、构建根节点、创建服务节点和更新服务节点状态等功能。`premain`方法是Java代理入口,用于初始化`...

    zookeeper实战:SingleWorker代码样例

    1. 连接ZooKeeper:每个工作节点都需要初始化一个ZooKeeper客户端,通过提供服务器列表、会话超时时间等参数来建立连接。 2. 创建临时顺序节点:在ZooKeeper的指定路径下,每个节点都会尝试创建一个临时且有序的...

    dabealu/zookeeper-exporter:v0.1.1

    arm镜像包

    zookeeper应用场景

    zookeeper应用场景

    zookeeper-visualizer-master.zip

    Zookeeper是由Apache开发的一个开源项目,基于Java实现,它提供了一种分布式一致性服务,用于管理分布式应用中的配置信息、命名服务、集群状态、选举等功能。Zookeeper的数据模型采用的是层次化的命名空间,类似于...

    zookeeper常见应用场景简单实现及ppt

    1、master选举:mastersel 2、数据的发布和订阅:subscribe 3、负载均衡:balance 4、分布式锁:lock 5、分布式队列:queue 6、命名服务:nameservice 演示代码下载(代码来自极客学院演示demo):

    开源监控管理zookeeper工具:exhibitor-1.6

    在Zookeeper的应用场景中,确保服务的稳定性和高可用性至关重要,而Exhibitor则为此提供了直观且易用的界面。它允许用户轻松地配置、管理和监视Zookeeper实例,从而简化了运维流程。 标题中的"exhibitor-1.6"指的是...

    zookeeper-3.3.3-API文档-中文版.zip

    赠送源代码:zookeeper-3.3.3-sources.jar; 包含翻译后的API文档:zookeeper-3.3.3-javadoc-API文档-中文(简体)版.zip 对应Maven信息:groupId:org.apache.zookeeper,artifactId:zookeeper,version:3.3.3 ...

    zookeeper-3.4.6-API文档-中英对照版.zip

    赠送源代码:zookeeper-3.4.6-sources.jar; 包含翻译后的API文档:zookeeper-3.4.6-javadoc-API文档-中文(简体)-英语-对照版.zip 对应Maven信息:groupId:org.apache.zookeeper,artifactId:zookeeper,version...

Global site tag (gtag.js) - Google Analytics