本月博客排行
-
第1名
宏天软件 -
第2名
kaizi1992 -
第3名
vipbooks - wallimn
- arpenker
- daizj
- xpenxpen
- zhangjijun
- sunnylocus
年度博客排行
-
第1名
青否云后端云 -
第2名
宏天软件 -
第3名
wy_19921005 - gashero
- gengyun12
- robotmen
- vipbooks
- fantaxy025025
- 大家都说我很棒
- wallimn
- hbxflihua
- qepwqnp
- e_e
- 解宜然
- ranbuijj
- javashop
- zw7534313
- ssydxa219
- jickcai
- sam123456gz
- gdpglc
- zysnba
- sichunli_030
- tanling8334
- appalese
- benladeng5225
- gaojingsong
- wiseboyloves
- zhangyi0618
- xpenxpen
- jh108020
- luxurioust
- xyuma
- nychen2000
- 龙哥IT
- arpenker
- wjianwei666
- wangchen.ily
- jbosscn
- lzyfn123
- 狂盗一枝梅
- java-007
- Jameslyy
- hanbaohong
- kaizi1992
- xiangjie88
- mengjichen
- silverend
- ajinn
- zxq_2017
最新文章列表
Twitter Storm 安装配置
现况:由很多Job队列和Worker组成的数据处理网,Worker处理队列消息,更新数据库供后续处理...
局限:配置不灵活,队列吞吐量低,没有多少容错,数据延迟明显
Storm:可用于处理消息和更新数据库(流处理),在数据流上进行持续查询,并以流的形式返回结果到客户端(持续计算),并行化一个类似实时查询的热点查询(分布式的RPC);解决延迟、容错;可伸缩;
官方安装说明:https:/ ...
Nimbus(一) 清理目录
Nimbus(一) 清理目录
Nimbus启动的时候,其实是运行了一个thrift server,它会在topology提交之前,做一些清理一些东东.
什么东东?
1. 清理中断了的topology: 这个中断指的是在本地目录/STORM_LOCAL_DIR/stormdist下存在,而在ZK目录下/storms/topologyid下不存在的topology的信息。
storm ...
Twitter Storm 里有神马
Twitter Storm
twitter storm是twitter的流计算框架。本文简单的介绍该框架。
twitter主要包括4个东东
Nimbus
用户提交一个topology首先是提交给nimbus,nimbus对提交过来的topology开始分配任务,将任务信息写入到zookeeper中。这是主要的工作,还有其他的一些工作,比如定是清理一些jar包,目录什么的。
Supervis ...