本月博客排行
-
第1名
kaizi1992 -
第2名
arpenker -
第3名
wy_19921005 - hanbaohong
- jh108020
年度博客排行
-
第1名
龙儿筝 -
第2名
宏天软件 -
第3名
青否云后端云 - vipbooks
- wy_19921005
- benladeng5225
- fantaxy025025
- e_e
- kaizi1992
- tanling8334
- arpenker
- sam123456gz
- javashop
- zysnba
- xiangjie88
- lemonhandsome
- wallimn
- ganxueyun
- Xeden
- xyuma
- zhanjia
- wangchen.ily
- jh108020
- johnsmith9th
- zxq_2017
- jbosscn
- forestqqqq
- daizj
- ajinn
- xpenxpen
- 喧嚣求静
- ranbuijj
- kingwell.leng
- silverend
- kristy_yy
- lchb139128
- jveqi
- lich0079
- lzyfn123
- java-007
- sunj
- yeluowuhen
- lerf
- xiaoxinye
- flashsing123
- zhangjijun
- lxguy
- bosschen
- lyndon.lin
- sunnylocus
最新文章列表
storm通过JMX监控nimbus、supervisor
storm.yaml添加JMX的配置如下:
nimbus.childopts: "-Xmx1024m -Djava.rmi.server.hostname=192.168.1.1
-Dcom.sun.management.jmxremote.port=9801
-Dcom.sun.management.jmxremote.authentica ...
解决storm集群上的nimbus和supervisor结点无缘无故自动停止的方案
storm在生产上跑得很欢快,最近突然遇到一个问题,不知道storm是什么原因,无缘无故的自动停止了。查看日志没有任何的报错信息,包括警告信息都没有,反正就是无缘无故的shut down了。问题分析,初步我们判断应该是系统资源不足导致的,但这只是推测,因为storm集群的这些server都没有做监控,只有后面加上监控才能验证是否是因为资源问题引起的。
好吧!既然遇到问题咱们就解决问题吧! ...
strom之nimbus
Storm
Storm的主线主要包括4条:nimbus, supervisor, worker和task。
Nimbus
要了解nimbus的具体做的操作,可以从提交一个topology的流程开始。
1.1 Prepare
Nimbus启动时候,运行了一个Thrift Server。它会在topology提交之前做以下四个工作。
(1) 清理一些中断了的topolog ...
Nimbus(一) 清理目录
Nimbus(一) 清理目录
Nimbus启动的时候,其实是运行了一个thrift server,它会在topology提交之前,做一些清理一些东东.
什么东东?
1. 清理中断了的topology: 这个中断指的是在本地目录/STORM_LOCAL_DIR/stormdist下存在,而在ZK目录下/storms/topologyid下不存在的topology的信息。
storm ...