linxiao
- 浏览: 12798 次
- 性别:
- 来自: 北京
-
最新评论
文章列表
hadoop可以在单个节点上，用伪分布的模式来运行hadoop的各个组件。
当前机器环境
操作系统：64 位 CentOS
Jdk版本：1.7.0_79，64位jvm。
准备工作
1、 修改hosts
为了不需要记住冗长的ip地址，便于识别那个节点，我们 ...
在hadoop的官方网站，每个发行的版本都提供了 源码包 和 编译后的二进制发行包，那如何选择了？下载编译后的包，在系统上解压，设置配置文件后就可以直接使用，但在使用hadoop命名过程中，每次都会显示一个警告，如
hadoop fs -ls /
WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java classes where applicable
提示不能使用本地的lib，使用内部的java class来应用。这个本地的nati ...
1、概述
这部分主要描述，在生产环境中，如何来搭建一个高可用性的hadoop集群。在hadoop集群中，NameNode是一个非常核心的组件，上面存储着所有文件的元数据信息，比如文件跟数据块的映射关系，
数据块跟集群中节点的映射关系等内容。一旦NameNode出现故障，整个集群将不可用。
NameNode的HA方案，是在一个集群中配置两个NameNode，其中一个处于活跃Active状态，另一个为Standby状态。如果活跃的NameNode宕机或者正常关闭，Standby可以快速切换为Active。
另外，还有一种高可用 ...