`
xpenxpen
  • 浏览: 724919 次
  • 性别: Icon_minigender_1
  • 来自: 上海
社区版块
存档分类
最新评论

hadoop2.7.2单机模式安装(win7无需cygwin)

hadoop 
阅读更多
本文安装环境概述：
windows7 64bit
jdk1.7.0_72 64bit
hadoop2.7.2

Hadoop从v2以后，单机模式已经可以在Windows上运行了，而且无需cygwin。而单机伪分布式模式理论上也是可以运行的，但是笔者在运行时遇到了形形色色的问题，所以这里就不讨论了。本文记录单机模式安装。

1.下载hadoop
http://hadoop.apache.org/releases.html
下载hadoop-2.7.2.tar.gz，解压。比如我们解压到d盘。D:\opensource\hadoop\hadoop-2.7.2

2.配置环境变量
配置HADOOP_HOME,并将HADOOP_HOME\bin加入到PATH中。

3.Windows本地库下载
https://github.com/sardetushar/hadooponwindows/tree/master/bin下载hadoop.dll和winutils.exe这2个文件(也可在本文附件处下载)，拷贝到HADOOP_HOME\bin
注意这个hadoop.dll是64位的，而且对应hadoop2.7。如果你的系统不是64位或者hadoop不是2.7，那就不行了。

4.wordcount测试

这里测试《Hadoop MapReduce v2 Cookbook》一书第一章的wordcount程序。 

hadoop jar chapter1-2.0-SNAPSHOT.jar chapter1.WordCount wc-input wc-output


如果一切顺利，可以看到单词的统计出来了。

5.参考资料
http://toodey.com/2015/08/10/hadoop-installation-on-windows-without-cygwin-in-10-mints/
  • hadoop.dll.7z (55.7 KB)
  • 描述: hadoop.dll winutils.exe
  • 下载次数: 34
分享到：
| ELK超快速起步（Windows）
评论
发表评论

您还没有登录,请您登录后再发表评论

相关推荐

    win7下编译过的hadoop2.7.2

    但是，通过一些特定的步骤，可以在Windows系统上编译和使用Hadoop，而提供的“win7下编译过的hadoop2.7.2”文件正是为了简化这一过程。 首先，我们来看一下Hadoop在Windows上的编译步骤。在Windows 7环境下编译...

    hadoop2.7.2 win10编译下的

    1. **安装依赖**：在Win10上，你需要安装Java Development Kit (JDK) 7或更高版本，因为Hadoop需要Java环境来运行。此外，你还需要Cygwin，这是一个提供Linux命令行工具的Windows环境，因为Hadoop的构建脚本基于Unix...

    hadoop2.7.2依赖文件

    依赖工具类通常指的是那些帮助Hadoop在非Unix-like系统上运行的工具，如模拟Linux环境的Cygwin、MinGW，或者专门为Windows优化的Hadoop发行版，如Apache Hadoop for Windows或Cloudera's Distribution Including ...

    win10下编译过的hadoop jar包--hadoop-2.7.2.zip

    在win10下编译Hadoop 2.7.2，首先需要安装Java开发工具包（JDK），因为Hadoop是用Java编写的。然后，下载Hadoop源码，使用Apache Maven或Gradle等构建工具进行编译。编译过程中可能需要配置环境变量，如HADOOP_HOME...

    win10下hadoo2.7.2的hadoop.dll和winutils.exe

    在Windows 10环境下搭建Apache Hadoop 2.7.2的开发和调试环境，Hadoop.dll和Winutils.exe是两个关键组件。本文将详细解释这两个组件的作用，以及如何在Windows系统中正确使用它们。 Hadoop.dll是Apache Hadoop在...

    win10下hadoo2.7.2的hadoop.dll和winutils.exe.rar

    要在Windows 10上安装Hadoop 2.7.2，首先需要下载Hadoop的Windows版本。解压后，将`hadoop.dll`和`winutils.exe`放到正确的位置，通常是`HADOOP_HOME\bin`目录。然后，设置环境变量`HADOOP_HOME`指向Hadoop的根目录...

    window10下编译的hadoop2.7.2

    7. **安装和使用Hadoop 2.7.2**：编译得到的jar包可以用于在Windows环境中搭建Hadoop伪分布式或完全分布式集群。配置Hadoop的配置文件（如`core-site.xml`、`hdfs-site.xml`、`mapred-site.xml`和`yarn-site.xml`）...

    window10-hadoop-2.7.2.zip.zip

    描述中提到"windows下的hadoop2.7.2编译源码"，意味着这个压缩包可能包括了源代码，用户可以在Windows 10系统上进行编译。通常，Hadoop主要在Linux环境中运行，但通过特定的配置和工具，如Cygwin或MinGW，也可以在...

    hadoop2.7.2windows10编译后的bin目录文件

    总之，`hadoop2.7.2windows10编译后的bin目录文件`包含了运行Hadoop集群所需的各种核心工具，通过这些工具，我们可以对Hadoop集群进行管理、监控和数据处理，是理解和操作Hadoop不可或缺的一部分。在Windows 10上...

    HadoopBin-2.7.2安装依赖文件

    因此，确保系统已安装JDK 8或更高版本是至关重要的，因为Hadoop 2.7.2与JDK 7及更低版本的兼容性不佳。你需要下载并按照官方指南安装JDK，并设置好`JAVA_HOME`环境变量，使其指向JDK的安装路径。 其次，Hadoop是...

Magicbox
Global site tag (gtag.js) - Google Analytics