`

hadoop-2.7.1 datanode

阅读更多

       最近几天在虚拟机上部署hadoop,部署好了之后在slave的两个节点上面jps无法查看到datanode进程,最后用了笨方法,问题解决了。

      我是基于VMware  workstation 9安装的三台rh Linux虚拟机,一主两从分别对应:

      192.168.1.100  master

      192.168.1.101  node1

      192.168.1.102  node2

安装部署好hadoop-2.7.1之后执行./start-all.sh之后在master下jps没有namenode,在两台node上面jps没有datanode,很是郁闷。

我的解决办法如下:

1.在master机器执行./stop-all.sh,停止hadoop

2.将三台机器的hadoop解压目录/usr/doop/hadoop-2.7.1目录下的hdfs/data和hdfs/name以及tmp目录全部清空,再分别在3台机器上面执行bin/hadoop namenode -format

3.在master上重新执行./start-all.sh,分别再jps,显示守护进程正常,namenode和datanode均正常显示。在浏览器里面输入mster:50070之后查看datenode information正常。

0
1
分享到:
评论

相关推荐

    hadoop-2.7.1.tar.gz.zip

    为了运行Hadoop,你需要启动DataNode(数据节点)、NameNode(名称节点)、ResourceManager(资源管理器)和NodeManager(节点管理器)等服务。一旦集群启动,你就可以通过编写MapReduce程序或使用其他生态工具来...

    hadoop-2.7.1.tar.gz

    之后,可以通过启动Hadoop的守护进程(如namenode、datanode、resourcemanager和nodemanager)来启动Hadoop服务,并利用Hadoop提供的工具进行数据处理。 总结一下,这个压缩包提供了一种方便的方式来在Windows上...

    hadoop-common-2.7.1-bin-master-master.zip

    3. **管理Hadoop守护进程**:可以启动、停止DataNode、NameNode等Hadoop服务。 4. **身份验证**:在Kerberos认证机制下,winutils.exe用于生成短期票证(TGT),供客户端进行安全通信。 安装与使用步骤: 1. 下载...

    hadoop-common-2.7.1-bin-master.zip+hbase-2.0.0-bin.tar.gz Hbase与Hadoop版本对应

    在配置完成后,可以启动Hadoop的NameNode、DataNode和ResourceManager,然后启动HBase的Master和RegionServer。通过HBase的shell或者编程API,你可以创建表、插入数据并进行查询操作。 需要注意的是,Hadoop和HBase...

    hadoop-2.7.1.zip

    Hadoop 2.7.1是Hadoop发展过程中的一个重要版本,它提供了许多增强的功能和性能优化,使得在大规模数据处理上更为高效。在这个版本中,Hadoop针对Windows操作系统进行了优化,使得Windows用户也能充分利用Hadoop的...

    Hadoop-2.7.1 win64编译后代码-ZIP

    此外,还需要配置Hadoop的配置文件,比如指定本地文件系统路径,设置NameNode和DataNode的地址等。 Hadoop 2.7.1版本引入了一些关键特性,例如YARN(Yet Another Resource Negotiator),它作为一个资源管理和调度...

    Hadoop-2.7.1分布式安装手册

    《Hadoop-2.7.1分布式安装手册》是一份详尽的指南,旨在帮助用户在不同的模式下安装和配置Apache Hadoop 2.7.1。Hadoop是开源的大数据处理框架,它允许在廉价硬件上进行大规模数据处理,具有高容错性和可扩展性。这...

    hadoop-2.7.1.rar

    Hadoop 2.7.1 是 Apache 基金会发布的一个开源分布式计算框架,它在大数据处理领域扮演着至关重要的角色。这个版本是Hadoop发展中的一个重要里程碑,提供了许多性能优化和新特性,旨在提高数据处理的效率和可靠性。 ...

    hadoop-bin winutils 2.7.1,x64

    WinUtils是Hadoop在Windows上的实用程序集合,包含了启动Hadoop守护进程(如NameNode、DataNode等)所需的命令行工具。这个2.7.1版本特别针对64位操作系统进行了编译,确保了在Windows环境下与Hadoop的兼容性和稳定...

    hadoop-2.7.1及使用说明

    "hadoop-2.7.1.tar.gz"是Hadoop源代码的压缩包,解压后需要根据具体环境进行配置,包括设置HADOOP_HOME环境变量,修改conf目录下的core-site.xml、hdfs-site.xml、mapred-site.xml和yarn-site.xml等配置文件。...

    hadoop2.7.1tar包.zip

    在这个hadoop2.7.1tar包.zip文件中,我们拥有了Hadoop 2.7.1的源码或二进制版本,它是一个重要的里程碑版本,包含了很多改进和优化。Hadoop在大数据领域扮演着核心角色,其主要由两个关键组件构成:HDFS(Hadoop ...

    hadoop win7环境搭建

    - 选择 `Windows -> Preferences -> Hadoop Installations`,点击 “Add” 添加 Hadoop 安装路径 `H:\hadoop-2.7.1`。 - 确认 `Hadoop Installation Directory` 和 `MapReduce Framework` 设置正确。 3. **创建 ...

    hadoop.zip hadoop2.7.1安装包

    Hadoop2.7.1是Hadoop的一个稳定版本,提供了许多改进和新特性,旨在提高性能、可靠性和可管理性。 在Hadoop2.7.1安装包中,`hadoop-2.7.1.tar.gz`是主要的发布文件,包含了Hadoop的所有组件和依赖库。这个tarball...

    hadoop-2.7.x&2.6.x windows可执行文件包

    本文将详细讲解如何在Windows操作系统上搭建和使用Hadoop 2.6.x及2.7.x版本的可执行环境,主要基于提供的压缩包文件:`hadoop2.7.1X64.zip`和`hadoop2.6(x64)V0.2.zip`。 一、Hadoop简介 Hadoop的核心组件包括HDFS...

    hadoop2.7.1 hadoop.dll和winutils.exe window7 64bit 下载包

    安装完成后,用户可以尝试启动Hadoop的各个服务,如NameNode、DataNode和YARN的ResourceManager和NodeManager,然后进行数据的读写和处理操作。 在Windows环境中,虽然Hadoop的使用相比Linux可能更为复杂,但通过...

    hadoop-2.7.1:Hadoop源码分析

    《Hadoop 2.7.1源码分析》 Hadoop是大数据处理领域的重要基石,其开源、分布式、可扩展的特性使得它在全球范围内广泛应用于数据存储和计算。Hadoop 2.7.1作为Hadoop发展的一个重要版本,包含了众多优化和改进,对...

    hadoop-common-bin-2.7.*

    Hadoop Common Bin 2.7.* 是针对Windows 64位操作系统设计的一个组件,它包含了运行Hadoop 2.7.1、2.7.2以及2.7.3版本所需的核心工具和库文件。这个压缩包不仅提供了Hadoop框架的基本执行脚本,还包含了一些关键的可...

    从零开始搭建Hadoop2

    本文档旨在详细介绍如何从零开始搭建Hadoop2.7.1的分布式集群。Hadoop是一种能够处理大量数据的大规模分布式存储与处理框架,它通过提供高可靠性、高性能、可扩展性的计算平台,使得大数据处理变得更加简单高效。本...

Global site tag (gtag.js) - Google Analytics