论坛首页 综合技术论坛

Strom的一些最重要特性

浏览 1510 次
精华帖 (0) :: 良好帖 (0) :: 新手帖 (0) :: 隐藏帖 (0)
作者 正文
   发表时间:2012-01-31  
原文:http://mdavey.wordpress.com/2012/01/25/anyone-using-storm-in-capital-markets/
Storm作为Twitter开源的实时计算框架, 已经成为big data下一个热点. 下面是一些主要特性:
  • 简单的编程模型: 类似MapReduce, 不过MR用来降低并行批量处理的复杂性, 而Storm用来简化实时处理模型.
  • 支持多种编程语言: 目前支持Clojure, Java, Ruby, Python
  • 容灾高可用: Strom管理整个worker集群, 允许单节点失败
  • 支持水平扩展:支持多线程, 进程, 服务器平行处理
  • 高可靠:保证消息能被全部处理, 一旦执行任务过程中失败, 能从失败处开始对消息进行回放.
  • 高效:用ZeroMQ作为底层消息队列, 保证消息能快速被处理
  • 支持本地模式:方便本地对Topology进行测试.

论坛首页 综合技术版

跳转论坛:
Global site tag (gtag.js) - Google Analytics