最新文章列表

storm通过JMX监控nimbus、supervisor

storm.yaml添加JMX的配置如下: nimbus.childopts: "-Xmx1024m -Djava.rmi.server.hostname=192.168.1.1 -Dcom.sun.management.jmxremote.port=9801 -Dcom.sun.management.jmxremote.authentica ...
roadrunners 评论(0) 有4072人浏览 2015-08-24 17:08

解决storm集群上的nimbus和supervisor结点无缘无故自动停止的方案

storm在生产上跑得很欢快,最近突然遇到一个问题,不知道storm是什么原因,无缘无故的自动停止了。查看日志没有任何的报错信息,包括警告信息都没有,反正就是无缘无故的shut down了。问题分析,初步我们判断应该是系统资源不足导致的,但这只是推测,因为storm集群的这些server都没有做监控,只有后面加上监控才能验证是否是因为资源问题引起的。   好吧!既然遇到问题咱们就解决问题吧! ...
roadrunners 评论(1) 有8540人浏览 2015-07-24 13:29

strom之nimbus

Storm Storm的主线主要包括4条:nimbus, supervisor, worker和task。 Nimbus 要了解nimbus的具体做的操作,可以从提交一个topology的流程开始。 1.1  Prepare Nimbus启动时候,运行了一个Thrift Server。它会在topology提交之前做以下四个工作。       (1)  清理一些中断了的topolog ...
zhou85xin 评论(0) 有14388人浏览 2013-10-30 19:28

Twitter Storm中Topology的状态

Twitter Storm中Topology的状态 状态转换如下,Topology 的持久化状态包括: active, inactive, killed, rebalancing 四个状态。 代码上看到每种状态都可以转换成一些持久化 ( 写入到 zk 中的状态 ) 或者中间状态。 (defn state-transitions [nimbus storm-id status] {:a ...
zhou85xin 评论(2) 有5590人浏览 2012-05-15 15:05

Nimbus(一) 清理目录

Nimbus(一) 清理目录 Nimbus启动的时候,其实是运行了一个thrift server,它会在topology提交之前,做一些清理一些东东. 什么东东? 1. 清理中断了的topology: 这个中断指的是在本地目录/STORM_LOCAL_DIR/stormdist下存在,而在ZK目录下/storms/topologyid下不存在的topology的信息。 storm ...
zhou85xin 评论(0) 有1790人浏览 2012-05-11 09:08

最近博客热门TAG

Java(141747) C(73651) C++(68608) SQL(64571) C#(59609) XML(59133) HTML(59043) JavaScript(54918) .net(54785) Web(54513) 工作(54116) Linux(50906) Oracle(49876) 应用服务器(43288) Spring(40812) 编程(39454) Windows(39381) JSP(37542) MySQL(37268) 数据结构(36423)

博客人气排行榜

    博客电子书下载排行

      >>浏览更多下载

      相关资讯

      相关讨论

      Global site tag (gtag.js) - Google Analytics