`
heipark
  • 浏览: 2094943 次
  • 性别: Icon_minigender_1
  • 来自: 北京
社区版块
存档分类
最新评论

(转) hbase中服务器时间不同步造成的regionserver启动失败

 
阅读更多


Caused by: org.apache.hadoop.ipc.RemoteException: org.apache.hadoop.hbase.ClockOutOfSyncException: Server s3,60020,1304927875246 has been rejected; Reported time is too far out of sync with master. Time difference of 41450ms > max allowed of 30000ms
 

1.方案1
在hbase-site.xml添加配置,下面配置允许3分钟时钟差异。
<property>
        <name>hbase.master.maxclockskew</name>
        <value>180000</value>
        <description>Time difference of regionserver from master</description>
 </property>

2.方案2

错误里指出节点机的时间和master的时间差距大于30000ms,就是30秒时无法启动服务。
修改各结点时间,使其误差在30s内

要配置服务器时间同步需要用到ntp,最好能连接外网的时间服务器。内网里面配起来比较麻烦点,所以就手动改了时间,再启动就可以了.

这个比较实用:
yum install ntp
安装后执行
ntpdate cn.pool.ntp.org
即可同步国际时间..
开机后自动同步时间:
vi /etc/rc.d/rc.local中,最下面添加
ntpdate cn.pool.ntp.org

 

转自:http://www.cnblogs.com/flyoung2008/archive/2011/12/02/2272761.html

--end

 

 

分享到:
评论
1 楼 di1984HIT 2014-06-20  
修改时间不错。

相关推荐

    尚硅谷大数据技术之HBase1

    需要注意的是,如果集群节点之间的时间不同步,可能会导致regionserver启动失败,此时需要调整节点时间同步或配置HBase的相关属性以允许时间偏差。 总的来说,本教程涵盖了HBase从环境准备到服务启动的全过程,对于...

    基于集群的HBase安装和配置

    - **HBase服务器架构**: - **HBaseMaster Server**:负责管理HRegion服务器的启动和关闭、Region的分配和迁移等任务。 - **HRegionServer**:负责处理具体的Region操作请求,维护分配给它的Region。 - **...

    hbase zk异常启动不了.docx

    当遇到“hbase zk异常启动不了”的问题时,通常意味着HBase依赖的ZooKeeper服务出现了故障,这可能是由多种原因导致的。在给定的描述中,我们发现了一个具体的问题:Linux磁盘空间满导致HBase宕机,同时ZooKeeper的...

    Hbase与zookeeper文档

    在示例中,集群由一台HMaster和两台RegionServer组成,每台服务器都有特定的硬件配置,如内存和CPU资源,用于支撑HBase的运行。 【HBase集群的安装和配置】 1. **下载与解压**:从Apache官网获取HBase的最新版本,...

    java大数据案例_3HBase

    - **hbase-site.xml**: 配置HBase集群的分布式运行,Master地址,时间同步差值,HDFS根目录,Zookeeper集群信息等。 ```xml ... &lt;name&gt;HBASE.master &lt;value&gt;master:60000 ... &lt;name&gt;HBASE.cluster....

    hbase-0.94.27.tar.gz

    1. **分布式架构**:HBase采用Master-Slave架构,由一个HMaster主节点负责区域服务器(RegionServer)的管理、故障检测和负载均衡,多个RegionServer存储实际的数据,提供读写服务。 2. **表和列族**:HBase的表是...

    Hadoop、HBase、Zookeeper安装部署

    4. **启动HBase**:启动Master和RegionServer,确保HBase集群运行。 5. **验证HBase**:创建表,插入数据,进行查询以验证安装。 **Zookeeper的安装部署**: 1. **下载Zookeeper**:获取最新稳定版。 2. **配置...

    hbase-0.92.1+zookeeper

    每个表被分为多个Region,Region由RegionServer管理,如果RegionServer出现故障,Zookeeper会帮助重新分配Region,保证服务不中断。 4. **列族存储**:HBase以列族为单位存储数据,每个列族包含一组相关的列。这种...

    HBase写性能优化策略

    如果写入请求不均衡,即某些RegionServer的负载远高于其他服务器,这不仅会导致系统并发度降低,也可能造成部分节点负载过高,影响整体性能。因此需要检查RowKey的设计是否合理以及预分区策略是否恰当,以保证写入...

    Hadoop2.6.2、Hbase1.1.2 HA

    当某个RegionServer宕机,ZooKeeper会自动将该服务器上的Region重新分配到其他健康的RegionServer上,确保数据服务不中断。 接着,Hive 1.2.1是基于Hadoop的数据仓库工具,它允许用户使用SQL(HQL)查询和管理存储...

    hadoop2.7.1+zk3.5+hbase2.1+phoenix 安装部署环境打包

    Zookeeper在HBase中起到了关键的作用,例如管理HBase的元数据和区域服务器的选举。 HBase是基于Hadoop的分布式NoSQL数据库,它支持实时读写,适合半结构化数据的存储。HBase-2.1.0版本提供了更稳定和高效的特性,...

    HBase0.96+zookeeper3.4.5安装配置(基于HADOOP2.2)

    4. **启动HBase**:运行`bin/start-hbase.sh`启动所有HBase进程,包括Master和RegionServer。 5. **验证安装**:通过HBase的Shell或者`bin/hbase org.apache.hadoop.hbase.util.HBaseFsck healthcheck`命令检查HBase...

    Hbase the defivete guid

    - **Master**:负责协调HBase集群中的RegionServer,处理Region的负载均衡,以及管理元数据表。 - **RegionServer**:负责存储和管理实际的数据,每个RegionServer可以管理多个Region。 - **Zookeeper**:提供协调...

    Linux下Hbase和zookeeper的安装和部署

    Zookeeper 是一款开源的分布式协调服务系统,主要用于解决分布式应用中的常见问题,例如:命名服务、状态同步服务、集群管理等。在进行HBase部署之前,首先需要正确安装和配置好Zookeeper。 ##### 步骤一:解压...

    hadoop+zookeeper+hbase集群搭建配置说明

    在配置完成后,启动各个服务,包括Hadoop的NameNode、DataNode、SecondaryNameNode、ResourceManager、NodeManager,Zookeeper服务器,以及HBase的Master和RegionServer。为了验证集群是否正常工作,你可以创建一个...

    hadoop2.2.0+Hbase0.96+hive0.12详细配置

    此外,保持集群内所有服务器的时间同步,避免因时间差导致的问题,例如HBase启动时的错误。 现在可以将解压后的Hadoop安装包上传到所有服务器的相同目录,例如`/home/hadoop/`。然后,按照Hadoop的官方文档进行配置...

    HBase的安装与配置

    指定哪些服务器将作为RegionServer运行HBase。 ``` Node11 node12 node13 ``` 4. **指定Standby Master** 创建并编辑`backup-masters`文件,指定一个或多个备用的HMaster节点。 ``` vim backup-masters...

    Hadoop+Hbase搭建云存储总结

    - **数据迁移与同步:** 将现有数据迁移到HDFS中,并在Hbase中建立相应的表结构。 - **系统优化:** 根据业务需求调整HDFS和Hbase的参数配置,确保性能最优。 **3. 应用场景** - **大数据分析:** 结合Hadoop的...

    Hbase架构简介、实践

    - **ZooKeeper**:维护配置信息、名字空间,提供分布式同步、组管理的中心化协调服务,存储master、regionserver、-ROOT-、.META.表的服务器地址。 - **HRegionServer**:处理来自Client的读、写、扫描请求,与...

    HBase in action

    - 使用协处理器扩展HBase:协处理器提供了一种机制,通过在HBase服务器端运行代码来减少网络往返次数,提高效率。 - 替代HBase客户端:可能涉及到除了原生HBase API之外的其他访问方式,如Thrift、REST等。 在示例...

Global site tag (gtag.js) - Google Analytics