`
yo8237233
  • 浏览: 62574 次
  • 来自: 深圳
社区版块
存档分类
最新评论

编译hadoop2.6.0

阅读更多
具体情况比较曲折:hadoop2.6.0编译不过
错误如下:



这个kms模块始终编译不过,最后得出结论国内的aliyun maven仓库有问题,

在编译hadoop2.2.0 可以通过,因为这个版本的hadoop没有kms这个模块,
要想编译2.6.0的hadoop  必须使用国外的maven地址。

2.2.0基本步骤和网上大概相同
可编译成功,同时安装snappy 成功:






同时记录下这篇文章:
http://blog.sina.com.cn/s/blog_6baac06c0101gvxr.html
  • 大小: 5.4 KB
  • 大小: 32.7 KB
  • 大小: 359.7 KB
分享到:
评论

相关推荐

    cent os 6.5 编译hadoop2.6.0源码

    在本文中,我们将深入探讨如何在Cent OS 6.5操作系统上编译Hadoop 2.6.0的源码,以及如何利用编译生成的lib包目录替换官方下载资源中的对应目录。这个过程对于那些希望自定义Hadoop配置、优化性能或解决特定环境下的...

    hadoop2.6.0编译工具(全部除JDK)

    以下是编译Hadoop 2.6.0所需的关键组件及其功能的详细解释: 1. **Apache Ant**: Apache Ant是一个Java库和命令行工具,用于驱动构建过程。它是Hadoop项目的主要构建工具,负责编译源代码、生成JAR文件、执行测试...

    spark-assembly-1.5.2-hadoop2.6.0jar包

    Spark-assembly-1.5.2-hadoop2.6.0.jar是Apache Spark的一个关键组件,主要用于在Scala环境中开发Spark应用程序。这个特定的版本(1.5.2)与Hadoop 2.6.0兼容,这意味着它可以无缝地运行在支持Hadoop 2.6.0的集群上...

    编译过的Hadoop-2.6.0.tar.gz

    在本文中,我们将深入探讨如何在Linux系统CentOS 6.5上编译Hadoop 2.6.0,并且介绍如何搭建基于该版本的Hadoop集群。 一、Hadoop 2.6.0的编译过程 1. 环境准备:首先,确保你的CentOS 6.5系统已安装了Java开发环境...

    hadoop2.6.0的源码jar hadoop-common-2.6.0-sources.jar

    下载hadoop2.6.0的源码辛苦编译成的,网上没找到编译好现成的,费了几个小时用maven编译好的带源码的jar包,中间还得安装编译protoc,可以直接供eclipse使用。

    使用命令行编译打包运行自己的MapReduce程序 Hadoop2.6.0

    ### 使用命令行编译打包运行自己的MapReduce程序 Hadoop2.6.0 #### Hadoop 2.x 版本变化及依赖分析 在Hadoop 2.x版本中,相较于早期版本,其架构和依赖库有了明显的变化。在早期版本如1.x中,所有的依赖都集中在`...

    Hadoop 2.6.0 API CHM版 自制

    自己下载完整的API文档后编译的,Hadoop 2.6.0 API CHM版

    hadoop-2.6.0.tar.gz&hadoop-2.6.0-cdh5.16.2.tar.gz

    用户可以通过解压此文件,编译安装来搭建自己的Hadoop环境,进行分布式计算和数据存储。这个版本还包含了其他相关工具,如Hadoop命令行工具、Hadoop守护进程等,用于管理和操作Hadoop集群。 而hadoop-2.6.0-cdh...

    hadoop.dll & winutils.exe For hadoop-2.6.0

    同时,由于Hadoop的Windows支持有时可能存在兼容性问题或更新不及时,因此,对于那些无法连接到外网的用户,提供这样的预编译版本(如压缩包中的文件)确实能带来很大的帮助,避免了自行编译和解决依赖的困扰。...

    hadoop 2.6.0 eclipse 需求包 依赖 jar

    在Hadoop 2.x版本中,为了提高模块化和可扩展性,原本集中在`hadoop-core.jar`中的功能被拆分到了多个独立的JAR...这些依赖JAR是构建在Eclipse中的Hadoop应用程序的基础,确保了代码的编译、运行和测试能够顺利进行。

    hadoop2.6.0(winutils、hadoop.dll)

    4. **HDFS模拟器**: Hadoop2.6.0版本包含了HDFS的本地模拟器,使得开发者可以在单机的Windows环境下测试HDFS操作,而无需完整的分布式集群。这对于开发和调试Hadoop应用程序非常有用。 5. **安全认证**: winutils....

    eclipse-hadoop2.6.0插件.rar

    Eclipse Hadoop 2.6.0 插件是针对Hadoop开发的一款工具,它使得在Eclipse集成开发环境中管理、配置和调试Hadoop项目变得简单高效。这个插件不仅提高了开发人员的工作效率,还降低了操作Hadoop集群的复杂性。 Hadoop...

    apache-carbondata-1.4.0-bin-spark2.1.0-hadoop2.6.0-cdh5.11.1.jar

    carbondata-1.4,spark-2.1,hadoop-2.6.0-cdh5.11.1源码编译

    hadoop 2.6.0 eclipse插件

    自己编译,绝对可用版,仅在以下环境测试,其他环境使用成功的求评价告知: win7 ,32位,eclipse4.3

    编译过的Hadoop2.6.0-cdh5.7.0的spark2.1.0安装包

    此压缩包"Spark2.1.0-bin-2.6.0-cdh5.7.0"是针对Hadoop2.6.0-cdh5.7.0版本编译优化后的Spark2.1.0版本,适用于Cloudera Distribution Including Apache Hadoop (CDH) 5.7.0环境。 1. **Spark核心组件**:Spark的...

    jdk7+ubuntu14.04_32位下编译的hadoop2.6.0的libhadoop.so.1.0.0

    jdk7+ubuntu14.04_32位下编译的hadoop2.6.0的libhadoop.so.1.0.0 hadoop-2.6.0 默认系统是64位的,要想在32位系统下运行需重新编译 这个是编译好的文件(注意环境),替换hadoop-2.6.0/lib/native/libhadoop.so....

    dr-elephant hadoop2.6.0 64位编译文件

    《Dr-Elephant:Hadoop2.6.0与Spark1.x监控利器》 Dr-Elephant是一款由LinkedIn开发的开源应用,专为Hadoop MapReduce(MR)任务和Spark作业提供性能分析和监控。这款工具能够帮助大数据工程师和管理员深入理解任务...

    hadoop2.6.0的32位本地库

    标题中提到的“hadoop2.6.0的32位本地库”正是为了解决这个问题。这个压缩包包含了在CentOS 6.6 32位环境下编译的本地库文件,经过测试,可以成功解决Hadoop在32位系统上运行时的本地库兼容性问题。通常,这些本地库...

    ubuntu64位hadoop2.6.0插件(eclipse)

    在ubuntu14.04环境下编译的hadoop2.6.0插件:hadoop-eclipse-plugin-2.6.0.jar

    hadoop2.6.0伪分布安装

    - 创建 `/opt/yarn` 目录,并进入该目录使用 `tar xvf hadoop2.6.0.tar.gz` 解压文件。 3. **用户和组创建**: - 根据实际需要创建用户组(例如 `hadoop`),以及用户(如 `yarn`, `hdfs`, `mapred`)。 4. **...

Global site tag (gtag.js) - Google Analytics