`
xpenxpen
  • 浏览: 731461 次
  • 性别: Icon_minigender_1
  • 来自: 上海
社区版块
存档分类
最新评论

hadoop2.7.2单机模式安装(win7无需cygwin)

阅读更多
本文安装环境概述:
windows7 64bit
jdk1.7.0_72 64bit
hadoop2.7.2

Hadoop从v2以后,单机模式已经可以在Windows上运行了,而且无需cygwin。而单机伪分布式模式理论上也是可以运行的,但是笔者在运行时遇到了形形色色的问题,所以这里就不讨论了。本文记录单机模式安装。

1.下载hadoop
http://hadoop.apache.org/releases.html
下载hadoop-2.7.2.tar.gz,解压。比如我们解压到d盘。D:\opensource\hadoop\hadoop-2.7.2

2.配置环境变量
配置HADOOP_HOME,并将HADOOP_HOME\bin加入到PATH中。

3.Windows本地库下载
https://github.com/sardetushar/hadooponwindows/tree/master/bin下载hadoop.dll和winutils.exe这2个文件(也可在本文附件处下载),拷贝到HADOOP_HOME\bin
注意这个hadoop.dll是64位的,而且对应hadoop2.7。如果你的系统不是64位或者hadoop不是2.7,那就不行了。

4.wordcount测试

这里测试《Hadoop MapReduce v2 Cookbook》一书第一章的wordcount程序。

hadoop jar chapter1-2.0-SNAPSHOT.jar chapter1.WordCount wc-input wc-output


如果一切顺利,可以看到单词的统计出来了。

5.参考资料
http://toodey.com/2015/08/10/hadoop-installation-on-windows-without-cygwin-in-10-mints/
  • hadoop.dll.7z (55.7 KB)
  • 描述: hadoop.dll winutils.exe
  • 下载次数: 34
分享到:
评论

相关推荐

    win7下编译过的hadoop2.7.2

    但是,通过一些特定的步骤,可以在Windows系统上编译和使用Hadoop,而提供的“win7下编译过的hadoop2.7.2”文件正是为了简化这一过程。 首先,我们来看一下Hadoop在Windows上的编译步骤。在Windows 7环境下编译...

    hadoop2.7.2 win10编译下的

    1. **安装依赖**:在Win10上,你需要安装Java Development Kit (JDK) 7或更高版本,因为Hadoop需要Java环境来运行。此外,你还需要Cygwin,这是一个提供Linux命令行工具的Windows环境,因为Hadoop的构建脚本基于Unix...

    hadoop2.7.2依赖文件

    依赖工具类通常指的是那些帮助Hadoop在非Unix-like系统上运行的工具,如模拟Linux环境的Cygwin、MinGW,或者专门为Windows优化的Hadoop发行版,如Apache Hadoop for Windows或Cloudera's Distribution Including ...

    win10下编译过的hadoop jar包--hadoop-2.7.2.zip

    在win10下编译Hadoop 2.7.2,首先需要安装Java开发工具包(JDK),因为Hadoop是用Java编写的。然后,下载Hadoop源码,使用Apache Maven或Gradle等构建工具进行编译。编译过程中可能需要配置环境变量,如HADOOP_HOME...

    win10下hadoo2.7.2的hadoop.dll和winutils.exe

    在Windows 10环境下搭建Apache Hadoop 2.7.2的开发和调试环境,Hadoop.dll和Winutils.exe是两个关键组件。本文将详细解释这两个组件的作用,以及如何在Windows系统中正确使用它们。 Hadoop.dll是Apache Hadoop在...

    win10下hadoo2.7.2的hadoop.dll和winutils.exe.rar

    要在Windows 10上安装Hadoop 2.7.2,首先需要下载Hadoop的Windows版本。解压后,将`hadoop.dll`和`winutils.exe`放到正确的位置,通常是`HADOOP_HOME\bin`目录。然后,设置环境变量`HADOOP_HOME`指向Hadoop的根目录...

    window10下编译的hadoop2.7.2

    7. **安装和使用Hadoop 2.7.2**:编译得到的jar包可以用于在Windows环境中搭建Hadoop伪分布式或完全分布式集群。配置Hadoop的配置文件(如`core-site.xml`、`hdfs-site.xml`、`mapred-site.xml`和`yarn-site.xml`)...

    window10-hadoop-2.7.2.zip.zip

    描述中提到"windows下的hadoop2.7.2编译源码",意味着这个压缩包可能包括了源代码,用户可以在Windows 10系统上进行编译。通常,Hadoop主要在Linux环境中运行,但通过特定的配置和工具,如Cygwin或MinGW,也可以在...

    hadoop2.7.2windows10编译后的bin目录文件

    总之,`hadoop2.7.2windows10编译后的bin目录文件`包含了运行Hadoop集群所需的各种核心工具,通过这些工具,我们可以对Hadoop集群进行管理、监控和数据处理,是理解和操作Hadoop不可或缺的一部分。在Windows 10上...

    HadoopBin-2.7.2安装依赖文件

    因此,确保系统已安装JDK 8或更高版本是至关重要的,因为Hadoop 2.7.2与JDK 7及更低版本的兼容性不佳。你需要下载并按照官方指南安装JDK,并设置好`JAVA_HOME`环境变量,使其指向JDK的安装路径。 其次,Hadoop是...

Global site tag (gtag.js) - Google Analytics