`

30天了解30种技术系列(19)------开源分布式协调系统Zookeeper

阅读更多

  

     分布式系统是互联网系统的根基,但是只要谈到分布式系统,就会涉及到分布式系统的管理,本期老钱介绍一下Zookeeper。

 

    Zookeeper目前是Hadoop 生态圈的热门项目,是一个分布式的,开放源码的分布式应用程序协调服务,是Google的Chubby一个开源的实现。它是一个为分布式应用提供一致性服务的软件,提供的功能包括:配置维护、名字服务、分布式同步、组服务等.

 

   目前使用了Zookeeper的项目有Hadoop,HBase,Flume,Yarn等。主要用来做机器的管理及分布式锁服务,HA等。

   
   系统模型如下:

   

  每一个Server的数据都是一样的,所以对于读操作,客户端随机链接一个Server 即可,如果是写操作,则需要对接到Leader,然后由Leader 负责转发与更新的操作。 

 

  具体角色如下:

  

 

   Zookeeper 在选举中,会采用Fast Paxos算法,作为基础。一般在生产环境咱们需要部署奇数个节点,3个起。

   

   Zookeeper的数据结构:

  

 

 

  Zookeeper通过Node 这样的树形结构管理数据,Node 分为持久态及瞬时态(创建的Client如果不在与集群通信那么该节点会消失,并触发相关的事件)。

 

  Zookeeper 的服务管理应用示意图:

  

 

  Zookeeper的核心---watch机制:在创建节点时,需要添加一个Watcher的代码,用来做节点状态改变的监控。

 

  对于Zookeeper详细的介绍及使用,大家可以找一下相关的资料及视频教程。这个东西目前已经算是分布式管理的标志性项目。

 

   更多精彩请关注微信 : 图灵搜索

   请大家使用中国第一个为程序员打造的搜索引擎:图灵搜索,https://www.tulingss.com 

 

  

 

  • 大小: 24.3 KB
  • 大小: 49.3 KB
  • 大小: 34.6 KB
  • 大小: 16.7 KB
2
4
分享到:
评论

相关推荐

    apache-zookeeper(apache-zookeeper-3.7.1-bin.tar.gz)

    apache-zookeeper分布式框架,压缩包内容:(apache-zookeeper-3.7.1-bin.tar.gz、apache-zookeeper-3.7.1.tar.gz、apache-zookeeper-3.6.4-bin.tar.gz、apache-zookeeper-3.6.4.tar.gz、apache-zookeeper-3.5.10-...

    apache-zookeeper-3.5.10-bin 环境搭配

    ZooKeeper是一个分布式的,开放源码的分布式应用程序协调服务,是Google的Chubby一个开源的实现,是Hadoop和Hbase的重要组件。它是一个为分布式应用提供一致性服务的软件,提供的功能包括:配置维护、域名服务、...

    从Paxos到Zookeeper分布式一致性原理与实践 + ZooKeeper-分布式过程协同技术详解 pdf

    《从Paxos到Zookeeper分布式一致性原理与实践》与《ZooKeeper-分布式过程协同技术详解》这两本书深入探讨了分布式系统中的一个重要概念——一致性,以及如何通过ZooKeeper这一工具来实现高效的分布式协同。...

    ZooKeeper-分布式过程协同技术详解 和从Paxos到Zookeeper

    ZooKeeper是由Apache软件基金会开发的一个开源项目,主要目标是简化分布式环境下的协调任务,为分布式应用程序提供高度可用、一致且有序的服务。 首先,ZooKeeper的核心概念包括节点(Znode)、会话(Session)和...

    apache-zookeeper-3.5.6-bin.tar

    总结来说,Apache ZooKeeper 是一个强大的分布式协调工具,通过 `apache-zookeeper-3.5.6-bin.tar` 压缩包,我们可以获取到部署和运行 ZooKeeper 3.5.6 版本所需的所有文件。理解其核心概念、部署步骤以及在分布式...

    apache-zookeeper-3.5.7-bin.tar.gz

    Apache ZooKeeper是一个分布式的,开放源码的分布式应用程序协调服务,它是集群的管理者,监视着集群中各个节点的状态根据节点提交的反馈进行下一步合理操作。最终将简单易用的接口和性能高效、功能稳定的系统提供给...

    Zookeeper分布式应用程序协调服务:zookeeper-3.4.13

    Zookeeper是Apache Hadoop生态体系中的一个重要组成部分,作为一个分布式协调服务,它在处理分布式环境中的数据管理和一致性问题上发挥着核心作用。Zookeeper-3.4.13是该服务的一个稳定版本,提供了多种关键功能,以...

    apache-zookeeper-3.8.4-bin.tar

    Apache ZooKeeper是一个分布式的,开放源码的分布式应用程序协调服务,它是集群的管理者,监视着分布式应用程序,提供了诸如配置维护、命名服务、分布式同步、组服务等这些分布式基础服务。Zookeeper是Apache Hadoop...

    最新版linux apache-zookeeper-3.7.0-bin.tar.gz

    Apache ZooKeeper 是一个高度可靠的分布式协调系统,广泛应用于大数据、微服务等领域的集群管理。在Linux环境下,Zookeeper 的最新版本是3.7.0,这个版本提供了许多新特性和性能优化,使得它更适合大规模分布式环境...

    分布式服务框架 Zookeeper -- 管理分布式环境中的数据

    Zookeeper的设计目标是简化分布式系统中的协调任务,使得开发者能够更专注于业务逻辑。 Zookeeper的核心概念包括节点(ZNode)、会话(Session)和观察者模式(Watcher)。ZNode是Zookeeper中的基本数据单元,类似...

    ZooKeeper-分布式过程协同技术详解PDF

    《ZooKeeper——分布式过程协同技术详解》这本书深入剖析了ZooKeeper这一强大的分布式协调服务。ZooKeeper是由Apache Hadoop项目开发的开源组件,它为分布式应用提供了一个高效、可靠的分布式协调解决方案。以下是该...

    apache-zookeeper-3.6.3-bin.zip

    Apache ZooKeeper是一个分布式的...在实际应用中,Zookeeper被广泛应用于大数据处理框架Hadoop、消息中间件Kafka以及分布式协调服务等领域。理解并掌握Zookeeper的安装和配置,将有助于你在分布式系统开发中游刃有余。

    apache-zookeeper-3.5.9-bin.tar.gz

    Apache ZooKeeper 是一个分布式协调服务,它为分布式应用程序提供了一个高效、可扩展的命名服务、配置管理、集群管理和分布式同步。在"apache-zookeeper-3.5.9-bin.tar.gz"这个压缩包中,包含了Zookeeper 3.5.9版本...

    ZooKeeper-分布式过程协同技术详解-最新版

    《ZooKeeper:分布式过程协同技术详解》是深入理解Zookeeper这一分布式协调服务的重要参考资料。Zookeeper是由Apache软件基金会开发的一个开源项目,主要用于解决分布式应用中的数据一致性问题,提供诸如命名服务、...

    apache-zookeeper-3.6.3-bin.tar的压缩包,解压到本地即可使用,还有zk.sh的脚本以及zoo.cfg

    apache-zookeeper-3.6.3-bin.tar的压缩包,解压到本地即可使用,还有zk.sh的脚本以及zoo.cfg和xsync。ZooKeeper 是一个分布式协调服务 ,由 Apache 进行维护。ZooKeeper 可以视为一个高可用的文件系统。ZooKeeper ...

    zookeeper-3.8.0安装包下载

    Apache ZooKeeper 是一个高度可靠的分布式协调系统,广泛应用于云原生环境中的服务发现、配置管理、命名服务等场景。Zookeeper-3.8.0 是该系统的最新版本,提供了更稳定和高效的服务。 Zookeeper 的核心概念包括...

    apache-zookeeper-3.8.4二进制安装包

    apache-zookeeper-3.8.4二进制安装包

    apache-zookeeper-3.6.3.zip

    Apache ZooKeeper是一个分布式的,开放源码的分布式应用程序协调服务,它是集群的管理者,监视着集群中各个节点的状态根据节点提交的反馈进行下一步合理操作。最终将简单易用的接口和性能高效、功能稳定的系统提供给...

Global site tag (gtag.js) - Google Analytics