`
njzyt2010
  • 浏览: 3504 次
  • 性别: Icon_minigender_1
  • 来自: 北京
社区版块
存档分类
最新评论

Linux系统下编译Hadoop2.5源码

 
阅读更多

准备:Hadoop2.5源码

1、Linux 操作系统
2、 JDK 1.6+
3、Maven 3.0 以上(包括3.0版本)

4、Findbugs 1.3.9 (如果需要运行findbugs)
5、ProtocolBuffer 2.5.0(必须是这个版本)
6、CMake 2.6或者更高的版本
7、zlib-devel
8、openssl-devel
9、机器一定要联网

 

进入到Hadoop的根目录:

执行 mvn package -Pdist,native,docs,src -DskipTests -Dtar

这种方法会生成分布式文件系统的 本地资源库、文档、源代码和编译后的Hadoop压缩包

 

分享到:
评论

相关推荐

    hadoop2.5汇总

    1. **性能优化**:Hadoop 2.5 在 MapReduce 框架和 HDFS 文件系统方面进行了大量优化,提高了数据处理的速度和效率。 2. **安全性增强**:增强了 Kerberos 认证机制,并增加了更多的安全配置选项,以确保数据的安全...

    hadoop2.5汇总:新特性、安装包、Eclipse插件、集群安装.pdf

    安装包包括了针对不同操作系统(如Linux)的预编译版本,以及源码包,这允许用户在不同环境下安装Hadoop。 4. Eclipse插件:提供了专门用于Eclipse开发环境的Hadoop插件。文档中提到了Eclipse插件的安装方法,以及...

    CentOS6.5编译Hadoop2.7.5(64位)详解,已编译好的64位包下载即可用

    我编译用到的包(protobuf-2.5.0.tar.gz,findbugs-3.0.1.tar.gz,apache-ant-1.9.13-bin.tar.gz,snappy-1.1.1.tar.gz)和编译的过程详解(遇到的错误)都在压缩包中(hadoop源码请到官网下载)。 背景Hadoop官网...

    protobuf-2.5.0,Linux版。

    在RedHat6.4_x64操作系统上成功编译hadoop2.7.3的信息,意味着protobuf-2.5.0与这个特定版本的Hadoop兼容,并且可以在64位的Red Hat Linux环境中运行。编译Hadoop通常涉及以下步骤: 1. 安装必要的依赖,如GCC编译器...

    Apache Kylin部署手册

    在压缩问题部分,提到了如果想使用snappy压缩算法,可能需要重新编译Hadoop源码,来确保native库支持snappy。snappy是一种高效的压缩算法,可以在保证一定压缩比的同时,尽量减少压缩和解压所需的计算资源。 Kylin...

Global site tag (gtag.js) - Google Analytics