`
aijuans8
  • 浏览: 187214 次
社区版块
存档分类
最新评论

hadoop实战之动态添加节点

 
阅读更多

本文地址:http://blog.csdn.net/kongxx/article/details/6896230

假定已经有了一个hadoop cluster环境,并且已经有了两个slave节点fkongnix1和fkongnix2,这里需要动态添加一个新的节点fkongnix3.

对于hadoop分布式模式环境的搭建可以参考hadoop学习之分布式模式

1. 修改${HADOOP_HOME}/conf/slaves文件,在其中添加一个新的slave节点,比如

2. 登录到新添加的slave节点上,进入${HADOOP_HOME}目录并运行以下命令:

3. 验证添加是否成功

3.1 访问http://localhost:50070/可以看到"Live Nodes"的数量就从2变成了3;

3.2 也可以通过以下命令行来验证是否成功





分享到:
评论

相关推荐

    Hadoop In Action (Hadoop实战)中文版

    ### Hadoop In Action (Hadoop实战)中文版 #### Hadoop概述 Hadoop是一个能够对大量数据进行分布式处理的软件框架。它通过提供一个高可靠性、高性能、可扩展的平台来处理海量数据集,使组织能够高效地存储、处理和...

    Hadoop实战中文版

    《Hadoop实战中文版》这一资源为初学者和有经验的开发者提供了深入理解Hadoop及其在大数据处理领域应用的机会。Hadoop是一个开源软件框架,旨在处理海量数据集,通过分布式计算提供高可靠性、高可扩展性和高效能。...

    《hadoop实战》英文版+源代码

    7. 高扩展性:Hadoop架构允许动态添加硬件节点,随着数据量的增长,系统能够轻松扩展,无需对现有架构进行重大改动。 8. 故障恢复:Hadoop通过数据冗余和节点间的监控实现自动故障检测和恢复,保证了服务的连续性。...

    Hadoop实战.pdf Hadoop in action

    ### Hadoop实战知识点详解 #### 一、Hadoop概述 Hadoop是一款开源软件框架,用于分布式存储和处理大型数据集。它能够通过集群中的多台计算机来存储和处理大规模的数据,具有良好的扩展性和容错性。 #### 二、...

    Hadoop实战中文版 扫描版

    根据提供的文件信息,“Hadoop实战中文版 扫描版”,我们可以从中提炼出一系列与Hadoop相关的知识点。尽管部分内容为空白,但通过标题、描述和标签,我们仍然可以围绕Hadoop进行深入探讨,涵盖其基本概念、核心组件...

    Hadoop实战.pdf

    Hadoop实战部分,通常会涵盖如何安装、配置和使用Hadoop环境,以及如何利用Hadoop生态系统中的不同工具来实现数据的存储、处理和分析。读者将学习到如何编写MapReduce程序,并理解如何使用Hadoop生态系统中的各种...

    hadoop实战中文版+电子版pdf.zip

    《Hadoop实战》是一本深度剖析Hadoop生态系统及其应用的权威指南,对于想要掌握大数据处理技术的IT从业者来说,是一本不可多得的参考书。Hadoop是Apache软件基金会的一个开源项目,它提供了分布式文件系统(HDFS)和...

    Hadoop实战(lam著,韩冀中译)中文版

    ### Hadoop实战(lam著,韩冀中译)中文版 #### 一、Hadoop概述 **Hadoop**是一款能够对大量数据进行分布式处理的软件框架。它由Apache基金会开发,旨在提供高可靠性、高效能及可扩展性的数据处理能力。Hadoop的核心...

    hadoop实战——初级部分学习笔记 2

    - **可扩展性**:支持动态添加新的节点到集群中,从而扩展存储和计算能力。 - **经济性**:可以在普通的商用硬件上运行,降低了成本。 - **可靠性**:通过HDFS的副本机制和MapReduce的任务监控机制确保数据的安全...

    Hadoop实战

    ### Hadoop实战——详解Hadoop的核心技术和应用场景 #### 一、Hadoop概述 **Hadoop** 是一个由 Apache 软件基金会维护的开源分布式计算平台。它主要由 **Hadoop 分布式文件系统 (HDFS)** 和 **MapReduce** 两大...

    Hadoop实战(虚拟多台电脑)

    ### Hadoop实战(虚拟多台电脑):搭建分布式环境详解 #### 一、Hadoop简介与下载 Hadoop是一款开源软件框架,用于处理大规模数据集(大于1TB)的分布式计算,尤其适用于在集群上存储和处理大数据。其核心组件包括...

    java操作hadoop之mapreduce分析年气象数据最低温度实战源码

    本实战项目主要展示了如何使用Java编程语言操作Hadoop MapReduce来分析年度气象数据中的最低温度。以下是对这个实战项目的详细解读: 首先,我们需要理解MapReduce的基本工作原理。MapReduce分为两个主要阶段:Map...

    Hadoop入门实战手册

    ### Hadoop入门实战手册知识点概览 #### 一、概述 **1.1 什么是Hadoop?** Hadoop是一个开源的分布式计算框架,主要用于处理大数据集。它最初由Doug Cutting和Mike Cafarella创建,并在2006年作为Apache项目发布...

Global site tag (gtag.js) - Google Analytics