博客首页 → twitter storm

最新文章列表

Twitter Storm 安装配置

现况：由很多Job队列和Worker组成的数据处理网，Worker处理队列消息，更新数据库供后续处理... 局限：配置不灵活，队列吞吐量低，没有多少容错，数据延迟明显 Storm：可用于处理消息和更新数据库（流处理），在数据流上进行持续查询，并以流的形式返回结果到客户端（持续计算），并行化一个类似实时查询的热点查询（分布式的RPC）；解决延迟、容错；可伸缩；   官方安装说明：https:/ ...
Twitter Storm安装配置 
蔚蓝搁浅 评论(0) 有1985人浏览 2012-11-09 11:46

Nimbus(一) 清理目录

Nimbus(一) 清理目录 Nimbus启动的时候，其实是运行了一个thrift server，它会在topology提交之前，做一些清理一些东东. 什么东东？ 1. 清理中断了的topology： 这个中断指的是在本地目录/STORM_LOCAL_DIR/stormdist下存在，而在ZK目录下/storms/topologyid下不存在的topology的信息。 storm ...
twitter stormnimbus 
zhou85xin 评论(0) 有1790人浏览 2012-05-11 09:08

Twitter Storm 里有神马

Twitter Storm twitter storm是twitter的流计算框架。本文简单的介绍该框架。 twitter主要包括4个东东 Nimbus 用户提交一个topology首先是提交给nimbus，nimbus对提交过来的topology开始分配任务，将任务信息写入到zookeeper中。这是主要的工作，还有其他的一些工作，比如定是清理一些jar包，目录什么的。 Supervis ...
twitter storm流计算 
zhou85xin 评论(0) 有1784人浏览 2012-05-08 09:59

最近博客热门TAG

Java(141746) C(73651) C++(68608) SQL(64571) C#(59609) XML(59133) HTML(59043) JavaScript(54918) .net(54785) Web(54513) 工作(54116) Linux(50906) Oracle(49876) 应用服务器(43288) Spring(40812) 编程(39454) Windows(39381) JSP(37542) MySQL(37268) 数据结构(36423)

博客人气排行榜

    博客电子书下载排行

      >>浏览更多下载

      相关资讯

      相关讨论

      Global site tag (gtag.js) - Google Analytics