Hadoop 学习之一（前言）

好几次想集中精力去系统的学习下hadoop，各种原因每次都是表面看了几天，然后搭建了简单的例子就放弃了，到现在连例子和linux虚拟机镜像都让我安装系统给弄丢了，正好，大不了从头再来！

 

在外企环境下上班有至少两点好处：

一、常看英文，导致看官方文档速度有所上升。

二、时间比较充足，可以学习自己感兴趣的东西。

 

所以跟着官网学习hadoop,官网地址

http://hadoop.apache.org/docs/current/index.html

版本：V2.6.0

 

Overview

Apache Hadoop 2.6.0 是在2.x.y版本线中的一个小版本，构建在稳定的2.4.1。

下面是主要特性和提升的一个简要说明：

       Common

               使用HTTP proxy server认证提升,这会为通过一个proxy server访问WebHDFS带来好处。

               一个新的Hadoop度量sink 可以直接写入Graphte

               Specification work 致力于 Hadoop Compatible FileSystem

      HDFS

               支持POSIX类型的文件系统的属性

               使用OfflineImageViewer,客户端可以通过WebHDFS API访问一个fsimage

               NFS 网关有些提升和解决了一些bug，Hadoop portmapper 不在需要运行一个网关，而且网关可 以拒绝未授权的端口的连接。

               SecondaryNameNode,JournalNode 和DataNode webUI用时髦的HTML5和Javascript 提升了看起来更加时髦一点。

      YARN

               YARN的REST API 支持写和修改操作了，用户可以通过它们提交和关闭应用

               时间线存储在YARN,用来存储通用的信息和应用规格的信息，支持Kerberos的认证

               公平调度支持在动态的分层的用户队列中工作，用户队列可以在指定的父队列中动态的创建

 

明天继续：）