`
shixiaomu
  • 浏览: 383814 次
  • 性别: Icon_minigender_1
  • 来自: 北京
社区版块
存档分类
最新评论

hadoop hive zookeeper 还不够

    博客分类:
  • java
阅读更多
hadoop hive zookeeper  还不够

好久不写博客了.讲讲现在做的事情吧. 数据平台.hadoop hive全上 .
现在比较纠结的是  分布式异构系统之间的整合和调度....
拷贝 ->清理->整理->合并->上传->计算->输出->通知...
各个环节之间怎么协调配合...
python  java shell  怎么才能综合利用这些东西,串联起来各种集群....

欢迎大家讨论.


分享到:
评论
1 楼 shixiaomu 2012-09-04  
我自己有了方案了
java+rabbitmq_server-2.8.5+python+shell
开发工作量不是特别大..
但是需要先跑通流程,期待特性:
多语言+集群+异构+重试机制+异步+反馈+报警整合

相关推荐

Global site tag (gtag.js) - Google Analytics