`
邢邢色色
  • 浏览: 230593 次
  • 性别: Icon_minigender_1
  • 来自: 广州
社区版块
存档分类
最新评论

ZooKeeper学习之配置【3】网络配置

阅读更多

下面这些配置对client与server之间的连接和超时时间进行了限制。

 

globalOutstandingLimit

这个配置指定了等待处理的最大请求数量的限制(zookeeper.globalOutstandingLimit)。

client发送请求的速度可能会比server端处理的速度快,会导致请求在server端排队,最终(在若干秒内)会使server的内存耗尽。为了避免这一点,如果等待的请求数量达到了globalOutstandingLimit,server端会拒绝client的请求。但是这个限制不是hard限制。每一个client至少能有一个outstanding请求,否则连接会开始出现超时。所以,当达到globalOutstandingLimit之后,只有在没有任何的pending请求时,server才会从client连接读取数据。

 

为了决定某一台确定的server的限制,可以简单的用这个配置项的值除以server的数量。现在没有一种聪明的方式来决定这个值来进行限制,总的说来,这个配置项的值就是outstanding请求的上限。实际上,负载无法在server间进行均衡,总有一些server的负载会高一些,即使没有达到上限。

默认的限制为1000个请求。通常不需要改变这个配置,如果有很多client会发送非常大的请求,你需要调低这个值,但是在实践中通常不需要改变这个值。

 

maxClientCnxns

决定了每个IP地址可以发起的socket连接个最大个数。

ZooKeeper使用了flow control和limit来避免连接过载。建立连接消耗的资源远远超过普通的操作消耗的资源。一瞬间过多的请求会造成拒绝服务的问题,所以加上了这个限制,当某个IP的连接超过了这个限制,server会拒绝连接。默认值为60。

 

clientPortAddress

默认server会监听所有的网络接口提供client来连接。有一些服务器会有多个网络接口,通常一些为内网接口一些为外网接口。如果不想开放外网接口,可以将此配置项设为内网接口。

 

minSessionTimeout

这是session过期的最小超时时间,单位为毫秒。当client发起连接时,它会请求一个特定的超时时间,但是实际的超时时间并能小于这个配置项。

 

开发者喜欢立即并准确的检测到client端的失败。但不幸的是,系统不能实时的检测到,实际上是使用心跳和超时来做的。超时的使用依赖于client端和server端的网络延迟和可靠性。超时时间必须至少等于网络的round trip time,但是偶尔会有丢包的情况,在这种情况下接收响应的时间会增加,因为会发送发送丢失的包。

 

默认minSessionTimeout是tickTime的2倍。把这个值设置得过低的话会导致错误的检测client的失败。设置得太高的话会导致检测client的失败的延迟。

 

maxSessionTimeout

这是最大的session超时时间,单位为毫秒。当client发起连接时,它会请求一个特定的超时时间,但是实际的超时时间并能大于这个配置项。

 

尽管这个配置不会影响系统性能,但会限制client消耗系统资源的时间。默认是tickTime的20倍。

分享到:
评论

相关推荐

    第7章 ZooKeeper组件安装配置.pdf

    理想的实验环境需要至少3个节点的服务器集群,所有节点之间网络通信畅通,每个节点的硬件配置建议为双核CPU、8GB内存和100GB硬盘。操作系统推荐使用CentOS 7.4。确保所有必要的服务和组件已按前文实验要求安装。 4....

    zookeeper分布式集群配置

    学习Zookeeper的操作和命令,可以使用Zookeeper提供的命令行工具`bin/zkCli.sh`。常用命令包括: 1. `ls /`:列出根目录下的节点。 2. `create /test "Hello, Zookeeper!"`:创建一个新的节点。 3. `get /test`:...

    zookeeper3八本

    《Zookeeper3八本》是针对Apache ZooKeeper的深度学习资料集合,特别关注在Windows操作系统下的部署和使用。Zookeeper是一个分布式协调服务,广泛应用于分布式系统中,如Hadoop、HBase、Kafka等,它提供了命名服务、...

    zookeeper-3.5.3-beta集群配置

    这里,我们配置了3个ZooKeeper服务器,每个服务器的客户端端口从2181到2183,选举端口从2182到2184。注意,每个服务器的id(在`server.id`中)必须唯一,并且对应正确的主机和端口。 接下来,为每个服务器创建一个`...

    zookeeper-3.5.3-beta配置版.zip

    配置版的ZooKeeper通常包含了预设的配置文件,使得用户可以更快地设置和启动服务,无需从零开始配置。在ZooKeeper的配置中,主要涉及以下几个核心文件: 1. `conf/zoo.cfg`:这是ZooKeeper的主要配置文件,包含了...

    有关zookeeper本地伪集群搭建的配置

    在本地搭建Zookeeper伪集群是开发者在测试和学习Zookeeper时常用的一种方式,它可以让用户在单机环境中模拟多节点集群的工作状态,而无需复杂的网络配置。以下将详细介绍如何进行Zookeeper本地伪集群的搭建。 首先...

    zookeeper 学习资料 上篇

    观看这个视频,你可以获得ZooKeeper入门的第一手经验,了解如何在本地环境中设置和运行ZooKeeper服务器,以及如何通过命令行工具进行交互。 总的来说,"Zookeeper 学习资料 上篇"会带你走进ZooKeeper的世界,从基础...

    zookeeper学习资料

    压缩包中的"学习文档"可能涵盖ZooKeeper的安装与配置、API使用、数据模型、命令行工具、集群搭建等内容。安装与配置通常涉及下载源码、编译、启动服务器,以及设置环境变量等步骤。API使用则包括创建、读取、更新和...

    zookeeper 学习资料 下篇

    《Zookeeper学习资料 下篇》 在Zookeeper的学习过程中,下篇主要涵盖了更深入的理论概念、实战技巧以及常见问题的解决策略。Zookeeper,作为分布式协调服务的基石,广泛应用于大数据、云计算等领域,它的核心功能...

    Zookeeper学习资源和笔记(附代码)

    最后,Zookeeper的集群搭建涉及多个服务器的配置,包括设置集群模式、调整选举算法参数(如`initLimit`和`synclimit`),以及确保各节点间网络通信的畅通。集群中的每个节点都会维护一份完整的数据副本,通过ZAB...

    Zookeeper学习中的疑难问题总结,很受用!

    ### Zookeeper 学习中的疑难问题总结 #### 一、Zookeeper 概念与特性 Zookeeper 是一个分布式的、开放源码的应用程序协调服务,它最初是 Google 的 Chubby 项目的开源版本。Zookeeper 在分布式系统中扮演了一个至...

    【Zookeeper管理工具】

    3. **会话(Session)**: 用户与Zookeeper服务器之间的连接称为会话,会话期间,Zookeeper服务器会保持与客户端的连接状态,如果会话超时或网络中断,会话结束。 **Zookeeper管理工具的功能** 1. **集群监控**: ...

    大数据之Zookeeper视频

    ### 大数据之Zookeeper知识点详解 #### 一、Zookeeper简介 Zookeeper是一个分布式的、开放源码的分布式应用程序协调服务,它是集群的管理者,监视着集群中各个节点的状态根据节点提交的反馈进行下一步合理操作。...

    zookeeper使用总结

    - **单机模式**:适用于测试和学习,配置简单,只需将`tickTime`等参数设置好即可。 - **伪集群模式**:模拟多台机器部署的场景,通常在同一台机器上启动多个实例,每个实例使用不同的端口。 - **集群模式**:...

    zookeeper 入门学习(PPT)

    3. **Zab协议**:Zookeeper的核心是Zab协议,它是一种分布式一致性算法,用于保证系统在发生网络分割等故障时仍能正常运行。Zab协议有两种模式:恢复模式和广播模式。 #### 四、Zookeeper 的部署 1. **单机部署**...

    Zookeeper安装包(Window安装)

    - 考虑设置防火墙规则,只允许特定IP或网络访问Zookeeper服务。 在Windows环境下安装Zookeeper虽然简单,但在实际部署中,建议考虑使用Linux环境,因为许多大数据组件在Linux上的稳定性更好,而且更符合分布式系统...

    zookeeper-3.4.12--.rar

    Zookeeper 3.4.12 版本是其稳定且广泛使用的版本之一,为开发者提供了可靠的工具来解决分布式系统中的复杂问题。 1. **Zookeeper 架构** ZooKeeper 的架构基于客户端-服务器模型。每个 ZooKeeper 集群由多个服务器...

    netty-redis-zookeeper高并发实战学习-netty-redis-zookeeper.zip

    3. ZooKeeper的API和使用方式,包括ZNode的创建、读写操作、会话和 watches 的管理。 4. 分布式系统的概念,以及ZooKeeper如何解决分布式环境中的问题,如一致性、可用性和容错性。 5. 如何结合Netty、Redis和...

    Zookeeper入门到精通 教学视频及文档

    《Zookeeper入门到精通》教学视频及文档涵盖了分布式协调服务Zookeeper的核心概念、安装配置、基本操作以及在实际应用中的高级技巧。Zookeeper是Apache Hadoop项目的一个子项目,它为分布式应用程序提供高效且可靠的...

    zookeeper入门练习demo

    3. **配置文件**:修改`conf/zoo.cfg`配置文件,设置数据存储路径(dataDir)和集群配置(server.1, server.2, ...)。例如,如果在三台服务器上搭建集群,配置应包含每个服务器的IP和端口。 4. **数据目录**:在每...

Global site tag (gtag.js) - Google Analytics