文章列表
Hadoop 双机热备-AvatarNode部署
转载自:http://blog.csdn.net/rzhzhz/article/details/7448453
Hadoop 双机热备
--AvatarNode部署
部署环境
虚拟机5台(1G内存,40G硬盘,ubuntu操作系统,Hadoop-0.20.2)
hadoop1-virtual-machine 10.10.11.250 AvatarNode(primary)
hadoop2-virtual-machine 10.10.11.152 AvataDataNode
hadoop3-virtual-machine ...
如果只增加集群的存储量,建议增加Hadoop datanode节点。 方法:- •停掉集群包括Hadoop和hbase,当然也可以不停掉,直接在hadoop namenode的配置文件Slave里添加新节点的host,别忘了在host文件里也要添加新添加的host名。 •执行bin/start-all.sh启动集群 •如果不手动作平衡,插入的数据将会放在新添加的节点上。以趋于平衡。 •如果手动平衡,则 start-balancer.sh和调用bin/sHadoop balancer命令相似,也可加参数 -threshold 5(threshold 是平衡阈值,默认是10%,值越低各节点越平衡,但 ...
zookeeper理论(转载)
- 博客分类:
- zookeeper
分布式服务框架 Zookeeper -- 管理分布式环境中的数据
许 令波, Java 工程师, 淘宝网
许令波,现就职于淘宝网,是一名 Java 开发工程师。对大型互联网架构设计颇感兴趣,喜欢钻研开源框架的设计原理。有时间将学到的知识整理成文章,也喜欢记录下工作和生活中的一些思考。个人网站是: HYPERLINK "http://xulingbo.net" http://xulingbo.net。
简介: Zookeeper 分布式服务框架是 Apache Hadoop 的一个子项目,它主要是用来解决分布式应用中经常遇到的一些数据管理问题,如:统 ...