监控hbase集群

对于稳定维护hbase，全面掌握分布式系统中的每一台主机状况，以及检测系统可能或正在出现的瓶颈，强大的监控是必须的。

比如：

　　region数、block住的内存大小、请求数、命中率、flush/split/compact次数和时间、读写响应时间分布、storefile数目、jvm状况、

本文介绍将hbase监控加入ganglia中

hbase本身集成了jmx进行数据采集，这也是沿用hadoop的机制。

配置还是比较简单的，参考http://hbase.apache.org/metrics.html，要点：

• 拷贝hbase/conf/hadoop-metrics.properties到你定义的配置文件夹
• 选择其中的hbase.class/rpc.class/jvm.class修改为org.apache.hadoop.metrics.ganglia.GangliaContext31
• hbase.servers=GMETADHOST_IP:8649，其中这里的GMETADHOST_IP为gmond.conf中的mcast_join值
• 重启hbase，会看到在ganglia监控画面中增加了很多图表

　当然，如果愿意，顺便打开hadoop的这个功能也挺不错的。


　hbase增加的监控信息非常全面，远远超过hadoop所增加的监控信息。如果还想自定义，请参照http://hadoop.apache.org/common/docs/current/api/org/apache/hadoop/metrics/package-summary.html来添加自己想看到的信息

评论

3 楼 boylook 2013-09-02  

请问你们是如何从ganglia里dump数据出来的

2 楼 lc_koven 2011-11-28  

wangjinpeng 写道

图表看起来就是直观呀~

图表多了还是不方便，因此我们现在写了个程序把这些图的数据取出来，汇总成几张重要的图表展示出来。ganglia仅用于收集数据。

1 楼 wangjinpeng 2011-11-25  

图表看起来就是直观呀~