本月博客排行
-
第1名
wy_19921005 -
第2名
mft8899 -
第3名
java-007 - Anmin
年度博客排行
-
第1名
龙儿筝 -
第2名
宏天软件 -
第3名
benladeng5225 - wy_19921005
- vipbooks
- 青否云后端云
- kaizi1992
- e_e
- tanling8334
- sam123456gz
- arpenker
- zysnba
- fantaxy025025
- xiangjie88
- wallimn
- lemonhandsome
- jh108020
- ganxueyun
- Xeden
- zhanjia
- wangchen.ily
- xyuma
- johnsmith9th
- zxq_2017
- forestqqqq
- jbosscn
- daizj
- ajinn
- xpenxpen
- silverend
- 喧嚣求静
- kingwell.leng
- lchb139128
- kristy_yy
- jveqi
- java-007
- javashop
- lzyfn123
- sunj
- yeluowuhen
- lerf
- chenqisdfx
- xiaoxinye
- flashsing123
- bosschen
- zhangjijun
- sunnylocus
- lyndon.lin
- lyj86
- paulwong
最新文章列表
storm通过JMX监控nimbus、supervisor
storm.yaml添加JMX的配置如下:
nimbus.childopts: "-Xmx1024m -Djava.rmi.server.hostname=192.168.1.1
-Dcom.sun.management.jmxremote.port=9801
-Dcom.sun.management.jmxremote.authentica ...
解决storm集群上的nimbus和supervisor结点无缘无故自动停止的方案
storm在生产上跑得很欢快,最近突然遇到一个问题,不知道storm是什么原因,无缘无故的自动停止了。查看日志没有任何的报错信息,包括警告信息都没有,反正就是无缘无故的shut down了。问题分析,初步我们判断应该是系统资源不足导致的,但这只是推测,因为storm集群的这些server都没有做监控,只有后面加上监控才能验证是否是因为资源问题引起的。
好吧!既然遇到问题咱们就解决问题吧! ...
strom之nimbus
Storm
Storm的主线主要包括4条:nimbus, supervisor, worker和task。
Nimbus
要了解nimbus的具体做的操作,可以从提交一个topology的流程开始。
1.1 Prepare
Nimbus启动时候,运行了一个Thrift Server。它会在topology提交之前做以下四个工作。
(1) 清理一些中断了的topolog ...
Nimbus(一) 清理目录
Nimbus(一) 清理目录
Nimbus启动的时候,其实是运行了一个thrift server,它会在topology提交之前,做一些清理一些东东.
什么东东?
1. 清理中断了的topology: 这个中断指的是在本地目录/STORM_LOCAL_DIR/stormdist下存在,而在ZK目录下/storms/topologyid下不存在的topology的信息。
storm ...