`
woodenfish
  • 浏览: 5918 次
社区版块
存档分类
最新评论

Ubuntu编译64bit Hadoop

 
阅读更多

安装相关软件

SVN

Ubuntu中SVN对应subversion


autoconf automake libtool cmake



 

ncurses-devel

Ubuntu对应为lib64ncurses5-dev


openssl-devel

Ubuntu下对应为openssl


还需要安装libssl-dev,一开始没有安装libssl-dev,当编译到hadoop pipes时总是不能通过。

gcc

Ubuntu中对应命令是apt-get build-dep gcc


maven



 

 

把maven-home加入path



 

安装protobuf



 

./configure

make

make check

make install



 

 

在Ubuntu中运行protoc –version时,不能执行,由此可见,protoc没能安装成功。

 

如下是解决办法:

参考:http://blog.csdn.net/xocoder/article/details/9155901



 

 

编译

 使用 mvn package -Pdist,native -DskipTests -Dtar



 

编译成果



 

分享到:
评论

相关推荐

    ubuntu server 14.04上编译Hadoop 2.6.4

    ### Ubuntu Server 14.04 上编译 Hadoop 2.6.4 的详细步骤 #### 一、环境准备 在开始编译 Hadoop 2.6.4 之前,确保您的环境中已经具备以下条件: 1. **Ubuntu Server 14.04 (64位)**:本教程将在 Ubuntu Server ...

    Ubuntu下hadoop-2.5.2编译好的64bit的native库

    标题提到的"Ubuntu下hadoop-2.5.2编译好的64bit的native库",意味着这是一个专门为64位Ubuntu系统优化的Hadoop原生库包。这个库包包含了与Hadoop 2.5.2版本兼容的所有必要的C/C++编译的库文件,它们可以显著提高...

    win 7 64上编译 Hadoop 2.7.3 源码

    ### Win 7 64位系统上编译Hadoop 2.7.3源码的知识点 #### 一、背景介绍 在当前大数据处理技术快速发展的背景下,Hadoop作为主流的大数据处理框架之一,被广泛应用于各类场景之中。对于开发者来说,能够熟练地在自己...

    Centos6.5编译64位Hadoop2.7.5.tat.gz

    【标题】"Centos6.5编译64位Hadoop2.7.5.tgz"涉及的关键技术点包括Hadoop、操作系统环境、源码编译以及系统兼容性。Hadoop是一个开源的分布式计算框架,它允许在大量廉价硬件上处理大规模数据。在这个场景中,用户将...

    hadoop2.8.1 64bit native 编译

    本文将深入探讨关于“hadoop2.8.1 64bit native 编译”的相关知识点,帮助你理解如何在64位环境下编译Hadoop的本地库。 1. **Hadoop Native Libraries**: Hadoop的Native Libraries是一组C/C++编写的库,它们提供...

    ubuntu12.04上hadoop2编译64位

    在Ubuntu 12.04系统中,如果你需要将32位的Hadoop 2.2.0编译成64位,以下是一份详细的步骤指南。首先,确保你的系统支持64位编译,并且你已经具备了必要的权限。 1. **安装GCC**: 在编译任何软件之前,你需要安装...

    win10下编译过的hadoop jar包--hadoop-2.7.2.zip

    总的来说,Hadoop 2.7.2在Win10上的编译和运行,不仅提供了在本地环境中学习和测试Hadoop的机会,也让你有机会深入理解分布式系统的工作原理和大数据处理的基本流程。这是一项对任何希望在大数据领域发展的IT专业...

    Centos7编译64位 Hadoop2.8.4.tar.gz

    本教程将详细解释如何在CentOS7系统上编译64位的Hadoop2.8.4版本。 首先,确保你的CentOS7系统是64位的,可以通过运行`uname -m`命令来检查。接着,安装必要的依赖库,包括Java开发环境(JDK),GCC编译器,Apache ...

    hadoop2.6,window7 64bit,hadoop.dll、winutils.exe文件下载

    通常,你可以从Apache Hadoop的官方网站或者第三方资源中找到适用于Windows的预编译版本。 **Spark与Hadoop的关系**: Spark是一个快速、通用和可扩展的大数据处理框架,它可以运行在Hadoop之上。Spark提供了更高效...

    基于centos6.5 已经编译好的hadoop-2.6.4

    描述中的"重新编译 64 位本地库"进一步说明了这个Hadoop版本是为64位系统定制的,确保了它能够充分利用64位系统的硬件资源。重新编译的过程可能包括了对源代码的调整和优化,以适应特定的CentOS 6.5系统以及64位架构...

    在linux中编译64位的 hadoop 2.4.1native

    1.已经编译好的 hadoop2.4.1 x64 用法:将hadoop-2.4.1/lib/native下所有文件删除,然后将包中的文件放入 2.自己安装搜索“编译64位的hadoop 2.4.1”参考:...

    win10下编译过的hadoop2.7.2 jar包

    这个压缩包文件“win10下编译过的hadoop2.7.2 jar包”是专门为在Windows 10操作系统上运行Hadoop 2.7.2版本而准备的。这个版本的Hadoop包含了所有必要的库文件和依赖,使得开发者能够在本地环境中配置和运行Hadoop...

    hadoop-2.8.1已经编译好的64bit的native库

    hadoop-2.8.1在64位系统上运行时会出现以下提示: :WARN util.NativeCodeLoader: ...而hadoop默认编译好的native库是32bit的,所以需要重新编译。现将编译好的hadoop-2.8.1的native库分享给大家,替代原来的库即可

    在 Ubuntu12.04 上安装Hadoop-1.2.1 (讲解的非常详细)

    【在 Ubuntu12.04 上安装 Hadoop-1.2.1】的详细步骤 在 Ubuntu12.04 上安装 Hadoop-1.2.1 的过程涉及到多个环节,包括系统准备、用户权限设置、Java 开发环境的安装、Hadoop 的下载与配置、主机名与网络设置以及 ...

    Hadoop-2.2.0针对ubuntu AMD64的native lib

    附件提供的“hadoop-2.2.0 native lib for Ubuntu AMD64”正是这样一个解决方案,它包含了在Ubuntu AMD64系统下编译出的Hadoop-2.2.0本地库文件。你可以按照以下步骤操作: 1. 首先,确保你的系统是64位Ubuntu,并...

    win7下编译过的hadoop jar包--hadoop-2.7.2.zip

    在Windows 7环境下编译并运行Hadoop可能需要一些特别的步骤,因为Hadoop最初是为Linux设计的。这个“win7下编译过的hadoop-2.7.2.zip”文件是为了适应Windows操作系统,使用户能在本地环境中学习和测试Hadoop功能。 ...

    Hadoop 2.4.1 64位编译版 hadoop-2.4.1-amd64.zip

    Hadoop官方不提供64位编译版,在此提供编译结果分享给大家 编译环境:Ubuntu14.04 测试环境:Ubuntu14.04 使用说明: 1.完整下载3个文件包:(上传大小限制,抱歉) hadoop-2.4.1-amd64.z01 hadoop-2.4.1-amd64.z02 ...

    官网荡下的源码,自己亲手编译的hadoop2.3.0 64位,给大家分享下

    官网荡下的源码,自己亲手编译的hadoop2.x 64位,给大家分享下 文件太大放的是百度网盘链接,目前有hadoop2.3.0,后面的版本我会陆续更新。

    centos7 64位下编译Hadoop2.7.2源码库文件

    在Linux系统,特别是CentOS 7 64位环境下,编译开源软件如Hadoop是一项常见的任务,这对于理解和优化Hadoop在本地环境中的运行至关重要。Hadoop 2.7.2是一个稳定版本,包含了分布式存储(HDFS)和计算框架...

    hadoop2.2.0 64bit 重新编译

    hadoop官网上面下载的Hadoop2.2.0 是32位的,现在将我自己重新编译的64bit发上来,这个是百度网盘分享的下载地址http://pan.baidu.com/s/1jG5KOCm,由于限制上传文件大小,所以只好如此了。

Global site tag (gtag.js) - Google Analytics