`
jayce洪
  • 浏览: 23240 次
  • 性别: Icon_minigender_1
  • 来自: 南京
社区版块
存档分类
最新评论

网络限制导致无法连接HBASE

 
阅读更多
再服务器上发现ping的通ZK的机器,以及其他HBASE机器,可是发现还是连不上HBASE数据库,Telnet下2222端口,发线无法连接上,联系信息部打通端口后,发现还是不行,整理了下,master监听的端口,regionserver监听的端口,发现需要再打通16010,16020,16030这三个端口。


这是master的监听,3个端口

tcp        0      0 ::ffff:172.20.15.29:16020   :::*                        LISTEN      6626/java          
tcp        0      0 :::16030                    :::*                        LISTEN      6626/java          
tcp        0      0 :::16010                    :::*                        LISTEN      6626/java 

这是regionserver的监听

tcp        0      0 ::ffff:172.20.15.27:16020   :::*                        LISTEN      1080/java          
tcp        0      0 :::16030                    :::*                        LISTEN      1080/java

he behavior:
1.0.0:
RPC: hbase.master.port IS NOT respected. Master binds to hbase.regionserver.port
INFO: Master binds to hbase.master.info.port AND hbase.regionserver.info.port.
By default, master will use: 16010, 16020, 16030
分享到:
评论

相关推荐

    HBase配置文件若干配置.zip

    此外,还有许多其他的配置项,如`hbase.hregion.split.policy`(分裂策略)、`hbase.hregion.max.filesize`(Region大小限制)和`hbase.bulk.load.enabled`(批量加载功能),都需要根据实际业务需求进行调整。...

    hbase参考文档

    2. 配置Spring:定义HBase的配置bean,包括连接池、表对象等。 3. 创建模板:通过Spring配置创建HBaseTemplate实例,用于执行CRUD操作。 4. 编写业务代码:使用模板的方法进行数据的增删改查。 四、HBase常用API 1....

    Hbase官方文档

    ### HBase官方文档知识点梳理 #### 一、简介与快速开始 **1.1 HBase 简介** - **定义**: HBase 是一个分布式的、版本化的列存储数据库,它构建于 Apache Hadoop 和 Apache ZooKeeper 之上,提供高可靠、高性能、...

    HBase设计:用与不用的智慧

    HBase专为需要快速访问、实时读写的大数据存储而设计,特别适合于那些无法满足传统关系型数据库的水平扩展性和高并发读写需求的应用场景。 在使用HBase前,我们首先要认识到关系型数据库的一些局限性。关系型数据库...

    HBase performance and robustness enhancement,(Zhihong Yu).pdf

    在HBase 0.90及其早期版本中,HRegionInfo引用了HTableDescriptor,这不仅浪费了大量的堆内存资源,尤其是在AssignmentManager中,还限制了大规模集群中区域(region)的数量,从而影响了系统的整体性能和扩展能力。...

    Hadoop 集群(第 12 期副刊)-HBase性能优化.pdf

    Linux系统默认的最大可打开文件数通常设定为1024个,这对于大多数应用场景来说可能足够,但在高并发环境下可能会出现“TooManyOpenFiles”的错误,导致HBase无法正常运行。为了避免此类问题,可以通过以下几种方式...

    HBase性能调优

    首先,关于`Zookeeper.session.timeout`,这是RegionServer与Zookeeper之间的连接超时时间。默认设置为3分钟,即180000毫秒。当超过这个时间,RegionServer会被Zookeeper认为失效,并从RS集群中移除,导致HMaster...

    HBASE在tb的使用

    ### HBASE在淘宝的应用与优化 #### 一、HBase简介 HBase是一个分布式的、面向列的NoSQL数据库系统,其底层数据存储基于Hadoop的HDFS。它具有高可用性和高性能的特点,并且能够支持大规模的数据存储需求,即可以处理...

    基于Hadoop的分布式主题网络爬虫的设计与实现.pdf

    设计的主题网络爬虫是以普通的网络爬虫为基础,但其对网站链接的搜索范围进行了限制,仅抓取与主题相关的特定网页。其工作原理和流程包括初始种子URL的选取、主题的确立、主题内容相关度分析等三个模块。 8. 初始...

    网络机器人java编程指南

    网络环境的不稳定性可能导致请求失败,因此良好的异常处理和重试策略是确保爬虫稳定运行的关键。 最后,我们可能需要考虑多线程和分布式爬虫。Java的并发API(如ExecutorService和Future)支持创建高效的多线程爬虫...

    非关系型数据库大作业.doc

    HBase数据库需要较高的文件句柄限制和进程数限制,因此需要修改`/etc/security/limits.conf`和`/etc/pam.d/mon-session`文件,以增加这些限制,防止因资源不足导致的错误。 Zookeeper的集群安装是HBase的前提。首先...

    网络蜘蛛spider crawl

    - **URL队列**:网络蜘蛛通常会使用一个URL队列来存储待抓取的网页链接。新发现的URL被添加到队列尾部,而当前处理的URL则从队列头部取出。 - **URL去重**:为了避免重复抓取同一个URL,我们需要对URL进行哈希处理...

    京东交易高可用缓存实践.pdf

    网络闪断可能导致全量复制问题,而过期时间的bug和链式复制的bug则会影响系统的稳定性。此外,一主多从的集群规模受到限制,一旦宕机,可能导致全量复制,这在大规模高并发环境下是不可接受的。 针对这些问题,京东...

    百度一面1

    在面试过程中,面试官通常会询问一系列与计算机网络、操作系统、数据结构以及编程语言相关的问题。以下是基于给定的标题和描述所涵盖的一些关键知识点的详细解析: 1. **进程通信**: - 进程间通信(IPC,Inter-...

    bigtable-sql基本使用1

    8. **长时间操作**:避免执行耗时操作,以免因长时间运行导致连接中断。 9. **脚本化**:客户端主要用于测试和验证SQL,最终应将脚本固定并由ETL或后台脚本调用执行。 10. **分页问题**:对于Spark-SQL,预览内容...

    基于大数据的全球能源信息系统-平台优化手册

    - **建议设置**:优化Zookeeper与HBase之间的连接。 - **配置方法**:在`hbase-site.xml`中调整相关参数,例如`zookeeper.znode.parent`、`zookeeper.recovery.retry`等。 **2. RegionServer的请求处理IO线程数**...

Global site tag (gtag.js) - Google Analytics