`

Apache Hadoop 2.6.0包含许多重要的改进

 
阅读更多

如果被人问到,为何用到hadoop2.6,而不是2.2或其他版本,你可以这样回答:

官网直接翻译:

 

Apache Hadoop 2.6.0包含许多重要的改进,如:
一、Hadoop Common组件方面
1> 密钥管理服务器(公测版)
2> 证书提供者(测试版)
二、Hadoop的HDFS方面
1> 异构存储层——版本II:
     1) 应用程序异构存储api
     2) 支持SSD存储设备层
     3) 支持内存作为存储层(公测版)
2> 支持存档存储
3> 透明的数据休息加密(公测版)
4> 操作安全的DataNode非root权限
5> 热插拔开:支持添加/删除数据节点数据而不需要重新启动节点(公测版)
6> AES支持快速导线加密
三、Hadoop Yarn
1> 支持在Yarn长时间运行的服务:
     1) 应用程序服务注册
2> 支持滚动更新
     1) ResourceManager重启时,Work防护
     2) NodeManager重启时,Container防护
3> 在调度支持节点的标签
4> 支持基于时间的资源保留能力调度器(公测版)
5> 应用构件可共享全局缓存(公测版)
6> 支持本地运行的应用程序在Docker 容器中运行(内测版本)

 

调理挺多的,需要好的记忆力。

 

分享到:
评论

相关推荐

    hadoop-2.6.0.tar.gz&hadoop-2.6.0-cdh5.16.2.tar.gz

    Hadoop-2.6.0.tar.gz是Apache官方发布的Hadoop 2.6.0源码包,包含了Hadoop的核心组件,如HDFS(Hadoop Distributed File System)、YARN以及MapReduce。用户可以通过解压此文件,编译安装来搭建自己的Hadoop环境,...

    hadoop2.6.0插件+64位winutils+hadoop.dll

    Hadoop2.6.0是这个框架的一个重要版本,它包含了多项优化和改进,以提高系统的稳定性和性能。在这个压缩包中,我们关注的是与Windows环境相关的两个关键组件:Winutils和hadoop.dll。 首先,让我们详细了解一下...

    hadoop 2.6.0 安装包

    Hadoop 2.6.0是Hadoop发展中的一个重要版本,它带来了许多性能改进、稳定性和功能增强。这个"hadop 2.6.0 安装包"是为了帮助用户搭建和配置Hadoop环境,特别适用于大数据处理和分析。 1. **Hadoop的核心组件** - *...

    hadoop-2.6.0

    Hadoop 2.6.0是Hadoop发展过程中的一个重要版本,提供了许多改进和新特性,旨在提高系统的稳定性和性能。 在Hadoop的核心组件中,有两个关键的部分:HDFS(Hadoop Distributed File System)和MapReduce。HDFS是...

    spark-assembly-1.5.2-hadoop2.6.0.jar

    Spark-assembly-1.5.2-hadoop2.6.0.jar是Spark中的一个重要组件,它是Spark的核心库,包含了所有Spark模块的合并版本,便于用户在运行Spark应用时进行一次性部署。本文将深入解析这个组件的关键知识点。 1. Spark...

    hadoop2.6.0版本hadoop.dll和winutils.exe

    在标题中提到的“hadoop2.6.0版本hadoop.dll和winutils.exe”是针对Windows环境下运行Hadoop的一些关键组件。 1. **Hadoop 2.6.0**: 这是Hadoop的一个主要版本,发布于2014年,带来了许多增强和改进。在Hadoop 2.x...

    spark-assembly-1.5.2-hadoop2.6.0jar包

    Spark-assembly-1.5.2-hadoop2.6.0.jar是Apache Spark的一个关键组件,主要用于在Scala环境中开发Spark应用程序。这个特定的版本(1.5.2)与Hadoop 2.6.0兼容,这意味着它可以无缝地运行在支持Hadoop 2.6.0的集群上...

    hadoop2.6.0.rar

    3. 解压Hadoop压缩包:使用`tar -zxvf hadoop2.6.0.tgz`命令解压。 4. 配置环境变量:在`~/.bashrc`或`~/.bash_profile`文件中设置HADOOP_HOME,并添加到PATH。 5. 配置Hadoop配置文件:修改`etc/hadoop/core-site....

    hadoop2.6.0-64-bin.zip

    标题"Hadoop2.6.0-64-bin.zip"指的是Hadoop 2.6.0版本的64位二进制发行版。Hadoop是一个开源的分布式计算框架,由Apache软件基金会开发,它允许在廉价硬件上处理大量数据,实现了大数据的存储和处理能力。这个压缩包...

    hadoop2.6.0的源码jar hadoop-common-2.6.0-sources.jar

    下载hadoop2.6.0的源码辛苦编译成的,网上没找到编译好现成的,费了几个小时用maven编译好的带源码的jar包,中间还得安装编译protoc,可以直接供eclipse使用。

    使用命令行编译打包运行自己的MapReduce程序 Hadoop2.6.0

    ### 使用命令行编译打包运行自己的MapReduce程序 Hadoop2.6.0 #### Hadoop 2.x 版本变化及依赖分析 在Hadoop 2.x版本中,相较于早期版本,其架构和依赖库有了明显的变化。在早期版本如1.x中,所有的依赖都集中在`...

    hadoop.dll & winutils.exe For hadoop-2.6.0

    这个库文件包含了Hadoop在Windows上运行时需要的各种函数和接口,如JNI(Java Native Interface)调用,使得Java代码能够与操作系统进行交互,执行如文件操作、网络通信等任务。由于Hadoop最初是为Unix-like系统设计...

    hadoop 2.6.0 eclipse 需求包 依赖 jar

    2. **hadoop-common-2.6.0.jar**:这个文件包含了Hadoop的通用功能,如文件系统抽象、网络通信、配置管理、日志记录等。它是Hadoop的基础服务库,几乎所有的Hadoop操作都需要依赖它。 3. **hadoop-mapreduce-client...

    cent os 6.5 编译hadoop2.6.0源码

    Hadoop 2.6.0版本在2014年发布,引入了许多改进和新特性,包括YARN(Yet Another Resource Negotiator),它作为资源管理器,提高了系统的资源利用率和可扩展性。 在Cent OS 6.5上编译Hadoop 2.6.0源码的步骤如下:...

    Hadoop2.6.0版本windows环境搭建

    总结,搭建Hadoop2.6.0在Windows环境下的过程涉及多个步骤,包括下载、解压、配置环境变量、修改配置文件、启动服务以及验证安装。此外,对于开发者而言,集成Hadoop-eclipse插件能提高开发效率。理解并掌握这些步骤...

    hadoop2.6.0,windows工具__.zip

    标题中的"hadoop2.6.0"指的是Apache Hadoop的2.6.0版本,这是一个开源框架,主要用于存储和处理大规模数据集。Hadoop的核心组件包括HDFS(Hadoop Distributed File System)和MapReduce,它们使得分布式计算成为可能...

    hadoop2.6.0(winutils、hadoop.dll)

    4. **HDFS模拟器**: Hadoop2.6.0版本包含了HDFS的本地模拟器,使得开发者可以在单机的Windows环境下测试HDFS操作,而无需完整的分布式集群。这对于开发和调试Hadoop应用程序非常有用。 5. **安全认证**: winutils....

    hadoop-2.6.0.tar.gz

    Hadoop 2.6.0是一个重要的版本,因为它引入了许多改进和优化,增强了系统的稳定性和性能。这个版本包含了Hadoop的核心组件,如HDFS(Hadoop Distributed File System)和MapReduce,以及其他相关项目,如YARN(Yet ...

    eclipse-hadoop2.6.0插件.rar

    总的来说,Eclipse Hadoop 2.6.0插件是开发和管理Hadoop应用的重要工具,它通过集成Hadoop的相关功能到Eclipse IDE中,为开发者提供了便利,提升了大数据开发的效率和体验。如果你是一个Hadoop开发者,这个插件将极...

    hadoop-2.6.0-cdh5.7.0.tar.gz

    Hadoop 2.6.0是Hadoop发展过程中的一个重要版本,它在Hadoop 2.x系列中引入了许多改进和优化,包括提升系统性能、增强容错性和稳定性,以及提供了更丰富的功能。CDH(Cloudera Distribution Including Apache Hadoop...

Global site tag (gtag.js) - Google Analytics