0 0

hadoop2.2的配置0

配置完成之后,

在master上 格式化namenode:./bin/hdfs namenode –format
然后
启动hdfs: ./sbin/start-dfs.sh

此时在001上面运行的进程有:namenode secondarynamenode

002和003上面运行的进程有:datanode

启动yarn: ./sbin/start-yarn.sh

此时在001上面运行的进程有:namenode secondarynamenode  resourcemanager

002和003上面运行的进程有:
只有datanode
没有nodemanager

这是什么原因?
谢谢。
2013年11月25日 15:15

2个答案 按时间排序 按投票排序

0 0

是这个文件报错,我刚发现

 <name>yarn.resourcemanager.resource-tracker.address</name>
             <value>192.168.5.92:8034</value>


yarn.resourcemanager.resource-tracker.address

这个值有问题,你是不是用别名,如果是别名的会,会出现找不到主机 ,所以nodeManager出现报错

但是这里会有另外一个问题,目前我还没发现什么原因

就是连接了一段时间之后,会出现拒绝连接,重启Hadoop又好了 

2013年11月28日 18:10
0 0

yarn-site.xml
很有可能是文件配置错误

2013年11月25日 16:41

相关推荐

    hadoop 2.2 安装包

    在安装Hadoop 2.2时,需要配置HDFS、YARN及MapReduce的相关参数,例如`core-site.xml`、`hdfs-site.xml`、`yarn-site.xml`和`mapred-site.xml`。安装过程涉及环境变量设置、配置文件修改、格式化NameNode、启动和...

    Hadoop2.2+Zookeeper3.4.5+HBase0.96集群环境搭建

    为搭建Hadoop2.2+Zookeeper3.4.5+HBase0.96集群环境,需要至少3台Linux机器,建议使用Centos6.4 64位操作系统,每台机器建议配置不低于4G内存和10G磁盘空间。 软件方面,需要安装jdk-7u55-linux-x64.rpm、apache-...

    Hadoop2.2 安装手册

    《Hadoop 2.2 安装手册》是针对大数据处理框架Hadoop 2.2的详尽安装指南,特别适合初学者和有经验的IT专业人员参考。这份手册不仅包含了文字描述,还配有完整的截图,使安装过程更加直观易懂。在本文中,我们将深入...

    hadoop2.2-64-native包(redhat6.3x64)

    标题中的"hadoop2.2-64-native包(redhat6.3x64)"指的是一个针对Red Hat Enterprise Linux 6.3 64位系统的Hadoop 2.2版本的本地库(native libraries)包。这个包是用户从源代码编译而来的,通常包含了Hadoop运行时所需...

    hadoop2.2 eclipse插件编译

    标题中的“hadoop2.2 eclipse插件编译”意味着我们要讨论的是如何在Eclipse中编译适用于Hadoop 2.2版本的插件。这个过程通常涉及到下载源代码、配置构建环境以及执行编译命令。 描述中提到的“hadoop 2.x插件编译所...

    hadoop2.2在window7 sp1 32位系统中运行所需要的文件

    首先,我们关注的标题是“hadoop2.2在window7 sp1 32位系统中运行所需要的文件”。这意味着我们要在32位Windows环境下搭建Hadoop 2.2环境。通常,在Windows上安装Hadoop会遇到一些挑战,因为官方主要支持Linux平台。...

    hadoop2.2 下hive的安装

    在本文中,我们将深入探讨如何在Hadoop 2.2环境下安装Hive。Hive是Apache软件基金会开发的一个数据仓库工具,它允许用户通过SQL-like查询语言(HQL)来处理存储在Hadoop分布式文件系统(HDFS)中的大数据集。在...

    HADOOP 2.2 集群配置(适合LINUX初学者)

    本篇文章将深入探讨如何在Linux环境下配置Hadoop 2.2集群,这对于初学者来说是一个很好的起点。我们将覆盖集群搭建的基础知识,包括环境准备、配置步骤、启动与验证等环节。 首先,了解Hadoop的架构至关重要。...

    hadoop2.2编译安装详解

    总结,Hadoop 2.2的编译安装涉及多步骤,从获取源码、编译、安装、配置到启动,每个环节都需要细致操作。理解Hadoop的架构和核心组件对于顺利安装和使用至关重要。此外,随着大数据应用场景的复杂化,了解如何进行...

    (转经修改)ganglia监控HADOOP 2.2

    本文将详细讲解如何在Hadoop 2.2版本上配置和使用Ganglia进行监控。 首先,我们理解Ganglia的基本架构。Ganglia由三部分组成:数据采集器(gmond),数据聚合器(gmetad)以及Web前端(web UI)。gmond运行在每个...

    RHadoop安装配置(基于HADOOP2.2)

    标题 "RHadoop安装配置(基于HADOOP2.2)" 涉及的是将R语言与Apache Hadoop框架集成的RHadoop项目,这是一项在大数据处理领域中的重要技术。RHadoop允许用户利用R的强大统计分析功能处理存储在Hadoop分布式文件系统...

    hadoop2.2+hbase0.96+hive0.12 安装文档

    综合以上信息,用户在进行hadoop2.2+hbase0.96+hive0.12的集成安装时,应该详细检查各个组件的版本兼容性,确保系统权限设置正确,按照实践指南执行相关配置步骤,并正确设置和使用MySQL数据库作为元数据存储。...

    hadoop2.2 api

    开发者在使用Hadoop 2.2 API时,需要了解如何配置Hadoop环境,编写Map和Reduce函数,设置输入输出格式,以及如何提交和监控作业。此外,理解YARN的资源管理和调度策略也是高效开发的关键。 总之,Hadoop 2.2 API是...

    HADOOP2.2安装部署手册

    Hadoop 2.2安装部署手册是一份详细的指南,用于在集群上安装和配置Hadoop版本2.2以及相关生态系统组件。根据提供的文件信息,可以总结出以下知识点: 1. 集群规划与主机名修改: - 在集群规划时,首先需要修改各...

    Hadoop2.2部署文档

    《Hadoop2.2部署指南》 在当前的数字化时代,大数据处理已成为企业的重要需求,而Hadoop作为开源的大数据处理框架,因其高效、可扩展的特性,深受业界青睐。本指南将详细介绍如何在Red Hat Enterprise Linux Server...

    HIVE 0.12安装配置(HADOOP2.2)

    **Hive 0.12 安装配置指南(基于 Hadoop 2.2)** 在大数据处理领域,Apache Hive 是一个非常重要的组件,它提供了一个SQL-like 的查询语言(HQL),使得非编程背景的用户也能对存储在Hadoop Distributed File ...

    hadoop2.2+hbase0.96+hive0.12安装整合详细高可靠文档及经验总结

    ### hadoop2.2+hbase0.96+hive0.12安装整合详细高可靠文档及经验总结 #### 一、Hadoop2.2的安装 **问题导读:** 1. Hadoop的安装需要安装哪些软件? 2. Hadoop与HBase整合需要注意哪些问题? 3. Hive与HBase的...

    Hadoop 2.2编译安装详解

    本文详细介绍了Hadoop 2.2在Linux环境下进行编译安装的过程,包括了环境搭建、软件安装、编译配置等关键步骤。通过上述步骤,用户可以在自己的服务器集群上部署Hadoop,并利用其强大的数据处理能力进行大规模数据的...

    hadoop2.2 hbase0.96 hive0.12安装整合详细高可靠文档及经验总结

    #### 一、Hadoop2.2的安装与配置 **1.1 安装前准备** - **操作系统环境**: Linux系统(推荐CentOS 6.x) - **JDK安装**: Hadoop依赖于JDK运行,需先安装JDK 1.7或以上版本。 - **SSH无密码登陆**: 用于多节点间的...

    Hadoop_2.2的安装与配置

    Hadoop2.2安装配置

Global site tag (gtag.js) - Google Analytics