`
aubdiy
  • 浏览: 697899 次
  • 性别: Icon_minigender_1
  • 来自: 北京
社区版块
存档分类
最新评论

hadoop2.4汇总:hadoop2.4插件下载、完全分布式、伪分布、eclipse插件开发大全(转载)

阅读更多

地址:http://www.aboutyun.com/thread-7795-1-1.html

 

 

hadoop2.4版本的发布,很多童鞋都想了解其新特性:
它们做了哪些改变?
该如何伪分布、完全分布安装?
它们和前面版本有什么不同?

这里做一个汇总

 


一、hadoop2.4的改进
Hadoop 2.4.0版本的改进
阐述了下面问题:
1.HDFS权限加强表现在哪方面?
2.HDFS的状态如何通过web端口访问?
3.ResourceManager是否支持HA(高可用)?
4.Capacity scheduler是否支持资源抢占,原理是什么?

二、如何去官网下载最新版本hadoop
有些同学不知道官网怎么,该怎么查看最新版本下面内容交给大家:
新手指导:hadoop官网介绍及如何下载hadoop(2.4)各个版本与查看hadoop API介绍

本贴阐述了下面问题:
1.如何访问hadoop官网?
2.如何下载hadoop各个版本?
3.如何查看hadoop API?

从零教你在Linux环境下(ubuntu)如何编译hadoop2.4
1.如果获取hadoop src  maven包?
2.编译hadoop需要装哪些软件?
3.如何编译hadoop2.4?
扩展:
编译hadoop为何安装这些软件?

三、各种插件下载
很多同学不喜欢去官网,这里给大家下载下来,并且有编译了64位安装包分享:
原文:hadoop2.4最新版本各种包下载
百度网盘
编译包:hadoop-2.4.0-src.tar.gz百度网盘:
链接: http://pan.baidu.com/s/1jGyZUDK 密码: kfnr

360网盘
http://yunpan.cn/QiuGKPf6ihGwz  访问密码 3d7e

64位下载包下载:
百度网盘:
链接: http://pan.baidu.com/s/1hqEDe2S 密码: 224f

360网盘
hadoop-2.4.0-64bit.tar.gz
http://yunpan.cn/QiuGA5BtVWbWk  访问密码 13c1

hadoop-eclipse-plugin-2.4.0插件包:
链接:http://pan.baidu.com/s/1jGJX9Im 密码:dxl6
32位安装下载


四、伪分布是安装
hadoop2.4.0 伪分布安装配置

阐述如下问题:
1.如何判断格式化成功?
2.hadoop2.4启动方式是否发生变化?
3.hadoop2.4在配置方面是否有变化?
4.伪分布的安装步骤?


五、完全分式布安装
hadoop2.4的完全伪分布安装包不同的系统及文档下载
Hadoop 2.4 完全分布式环境安装与配置及配置信息介绍
上面帖子交全,包括配置信息的解释

CentOS6 hadoop2.4完全分布式安装文档
上面适合在centOS上面安装


Hadoop-2.4.0 分布式安装手册(下载)
安装手册为下载文档
如果想了解的跟详细,可以比较他们的区别。


hadoop2.4 ha(双namenode自动故障转移安装)
1.hadoop ha是通过什么配置实现自动切换的?
2.配置中mapred与mapreduce的区别是什么?

3.hadoop ha两个namenode之间的关系是什么?


六、编译与开发
Win7中使用Eclipse连接虚拟机中的Ubuntu中的Hadoop2.4经验总结
阐述了:
1.log4j文件的作用是什么?
2.hadoop.dll,winutils.exe的作用是什么?
编译64位Hadoop2.4总结

阐述了:
1.32位安装在64位会出现什么问题?
2.an ant buildxception has occured exec returned 1这个错误的可能原因是什么?

Hadoop2.4.0 Eclipse插件制作及问题记录

阐述了:
1.build.xml文件的作用是什么?
2.hadoop2.4用的commons-lang-2.6.jar,在build.xml中该如何修改?
3.插件包的制作需要经过几个步骤?

查看获取源码:
从零教你如何获取hadoop2.4源码并使用eclipse关联hadoop2.4源码
1.如何通过官网src包,获取hadoop的全部代码
2.通过什么样的操作,可以查看hadoop某个函数或则类的实现?
3.maven的作用是什么?



如何通过eclipse查看、阅读hadoop2.4源码

1.官网src包下载包,能否直接使用?
2.如何跟踪和查看hadoop源码?

hadoop2.4新api编程:Hadoop Tool,ToolRunner原理分析

1.Tool是接口还是类?
2.Tool继承了那个类?
3.Tool与ToolRunner的关系是什么?
4. Tool与ToolRunner作用分别是什么?



教你如何查看API及使用hadoop新api编程:hadoop2.4新api与旧api调用例子对比说明

1.hadoop中mapred与mapreduce包,那个是被弃用的?
2.hadoop旧api如何初始化job?
3.hadoop新api使用那个函数来初始化job对象?

分享到:
评论

相关推荐

    Hadoop2.4.tgz下载

    2. **下载和解压**:从官方网站或镜像站点下载Hadoop 2.4.tgz,然后使用tar命令进行解压。 3. **配置Hadoop**:编辑conf目录下的配置文件,如hadoop-env.sh、core-site.xml、hdfs-site.xml和yarn-site.xml,设置相关...

    spark-1.6.0-bin-hadoop2.4.tgz

    在给定的压缩包文件"spark-1.6.0-bin-hadoop2.4.tgz"中,包含了Spark的1.6.0版本,该版本已经集成了与Hadoop 2.4版本的兼容性,使得用户可以在Hadoop环境下运行Spark应用。 Spark的核心组件包括: 1. **Spark Core*...

    spark-1.6.3-bin-hadoop2.4-without-hive.tgz

    Hadoop 2.4 是一个稳定且广泛采用的分布式存储和计算框架,而 Hive 则是基于 Hadoop 的数据仓库工具,用于处理和管理大规模数据。但在这个特定的版本中,Spark 并没有集成 Hive,使得它更适合那些不需要 Hive 支持,...

    spark-2.0.2-bin-hadoop2.4.tgz

    在标题中提到的"spark-2.0.2-bin-hadoop2.4.tgz"是一个压缩包,包含了Spark 2.0.2版本的二进制发行版,兼容Hadoop 2.4/2.5/2.6版本。这个版本的Spark支持Java Development Kit (JDK) 7,同时要求Scala编程环境为2.11...

    Hadoop2.4Eclipse插件

    Hadoop2.4的Eclipse插件,自己编译的,自己在用。

    hadoop的独立模式、伪分布模式、完全分布式、HA配置文件

    在Hadoop生态系统中,了解和配置不同的运行模式是至关重要的,这些模式包括独立模式、伪分布模式、完全分布式模式以及高可用性(HA)配置。接下来,我们将详细探讨这些模式及其相关的配置文件。 1. **独立模式**: ...

    hadoop-2.4.zip

    Hadoop是Apache软件基金会开发的一个开源分布式计算框架,它的核心设计思想是分布式存储和并行处理,旨在处理和存储海量数据。Hadoop 2.4是Hadoop发展过程中的一个重要版本,它带来了许多改进和新特性,使得大数据...

    ubuntu-14.04.1+hadoop2.4完全分布式搭建要点

    标题“Ubuntu 14.04.1 + Hadoop 2.4 完全分布式搭建要点”涉及到的是在Ubuntu 14.04.1操作系统上安装和配置Hadoop 2.4版本的过程,这是一个大数据处理框架,常用于分布式存储和计算任务。Hadoop的核心组件包括HDFS...

    eclipse安装Hadoop插件

    为了更好地利用Eclipse进行Hadoop程序开发,安装Hadoop Eclipse插件是十分必要的。本文将详细介绍如何在Eclipse中安装Hadoop插件及相关配置步骤。 #### 二、准备工作 1. **Eclipse IDE**:确保已安装最新版本的...

    eclipse hadoop2 插件

    3. **插件集成**:Eclipse通过插件机制扩展其功能,Hadoop2 插件就是这样的一个例子。它将Hadoop相关的开发工具集成了到Eclipse中,使开发者无需离开IDE即可进行Hadoop开发。 4. **主要功能**: - **项目创建**:...

    Hadoop2.4环境搭建与安装详解

    Hadoop2.4linux安装配置过程详细过程。

    hadoop-2.4.1版本大数据

    Hadoop是由Apache基金会开发的一个开源项目,其设计灵感来源于Google的MapReduce和GFS(Google File System)。Hadoop的核心由两个主要部分组成:HDFS(Hadoop Distributed File System)和MapReduce。HDFS是一个...

    hadoop2.5汇总:新特性、安装包、Eclipse插件、集群安装.pdf

    文档中提供了详细的安装步骤、下载链接和编译指南,可以帮助用户在Linux环境下安装和配置Hadoop集群,以及如何通过Eclipse插件进行Hadoop项目的开发和管理。同时,文档还关注了开发环境的搭建、API的使用以及社区...

    Eclipse Hadoop2.7插件

    9. **插件扩展**:Eclipse平台的开放性允许开发者根据需求扩展插件功能,比如添加对Hadoop其他组件(如HBase、Spark等)的支持。 在使用Eclipse Hadoop2.7插件时,需要注意以下几点: - 首先,确保你的Eclipse环境...

    hadoop伪集群搭建及eclipse插件配置

    1. 下载与安装Hadoop插件:Eclipse的Hadoop插件,如`hadoop-eclipse-plugin-2.6.0.jar`,需要下载并安装到Eclipse的plugins目录下。 2. 配置Hadoop的安装路径:在Eclipse的Preferences中设置Hadoop的安装路径。 3....

    hadoop-eclipse插件各版本合集

    2. **Eclipse IDE**:Eclipse是一款广泛使用的Java集成开发环境,支持多种语言和插件,为开发者提供了丰富的工具和功能,便于代码编写、调试和测试。 3. **Hadoop-Eclipse插件功能**: - **项目创建**:通过插件,...

Global site tag (gtag.js) - Google Analytics