Strom的一些最重要特性

原文:http://mdavey.wordpress.com/2012/01/25/anyone-using-storm-in-capital-markets/
Storm作为Twitter开源的实时计算框架, 已经成为big data下一个热点. 下面是一些主要特性:

• 简单的编程模型: 类似MapReduce, 不过MR用来降低并行批量处理的复杂性, 而Storm用来简化实时处理模型.
• 支持多种编程语言: 目前支持Clojure, Java, Ruby, Python
• 容灾高可用: Strom管理整个worker集群, 允许单节点失败
• 支持水平扩展:支持多线程, 进程, 服务器平行处理
• 高可靠:保证消息能被全部处理, 一旦执行任务过程中失败, 能从失败处开始对消息进行回放.
• 高效:用ZeroMQ作为底层消息队列, 保证消息能快速被处理
• 支持本地模式:方便本地对Topology进行测试.