下面给出了Hadoop的包的功能分析。
Package
Dependences
tool
提供一些命令行工具,如DistCp,archive
mapreduce
Hadoop的Map/Reduce实现
filecache
提供HDFS文件的本地缓存,用于加快Map/Reduce的数据访问速度
fs
文件系统的抽象,可以理解为支持多种文件系统实现的统一文件访问接口
hdfs
HDFS,Hadoop的分布式文件系统实现
ipc
一个简单的IPC的实现,依赖于io提供的编解码功能
参考:http://zhangyu8374.iteye.com/blog/86306
io
表示层。将各种数据编码/解码,方便于在网络上传输
net
封装部分网络功能,如DNS,socket
security
用户和用户组信息
conf
系统的配置参数
metrics
系统统计数据的收集,属于网管范畴
util
工具类
record
根据DDL(数据描述语言)自动生成他们的编解码函数,目前可以提供C++和Java
http
基于Jetty的HTTP Servlet,用户通过浏览器可以观察文件系统的一些状态信息和日志
log
提供HTTP访问日志的HTTP Servlet
分享到:
相关推荐
Hadoop2.6版本稳定版API文档CHM文件
Hadoop 0.20.2 API文档是开发者在使用开源分布式架构Hadoop时的重要参考资料。这个版本的API文档详细地介绍了如何利用Java语言来与Hadoop生态系统进行交互,为开发人员提供了丰富的功能和工具,以实现大规模数据处理...
包含翻译后的API文档:hadoop-yarn-api-2.5.1-javadoc-API文档-中文(简体)版.zip; Maven坐标:org.apache.hadoop:hadoop-yarn-api:2.5.1; 标签:apache、hadoop、api、yarn、jar包、java、API文档、中文版; 使用...
Hadoop2 API帮助文档是针对Hadoop 2.x版本的核心组件提供的一份详细参考资料,旨在帮助开发者高效地利用Hadoop框架进行大数据处理和分析。Hadoop是一个开源的分布式计算框架,由Apache软件基金会维护,其核心包括...
### Hadoop新旧API对比及应用实践 #### 一、Hadoop API概述 Hadoop作为一个分布式计算框架,提供了丰富的API供开发者使用。随着版本的更新,Hadoop API也在不断演进,新旧API之间存在一定的差异。理解这些差异对于...
Hadoop 2.7.4 API 帮助文档 ,这份帮助文档很全,包括了源码等等,你值得拥有。
Hadoop API中文说明文档是针对Apache Hadoop框架的开发者指南,它详细解释了如何使用Hadoop的编程接口来处理大规模数据。Hadoop是开源的分布式计算框架,它允许在廉价硬件集群上存储和处理海量数据。这个文档对于...
Hadoop是大数据处理领域的一个核心框架,其API的掌握对于开发者来说至关重要。Hadoop API提供了丰富的功能,使得用户能够高效地处理大规模数据。这个“hadoop-API.zip”压缩包包含了Hadoop的中文版API文档,对于正在...
自己下载完整的API文档后编译的,Hadoop 2.6.0 API CHM版
hadoop-api.rar...介绍使用编码/解码器的典型实例(代码在org.hadoopinternal.compress包中)。其中,compress()方法接受一个字符串参数,用于指定编码/解码器,并用对应的压缩算法对...
hadoop的api手册,包含hadoop开放的编程接口及参数说明
hadoop中文版API.chm文件,查找hadoop的类中方法、方法的用法等,方便、好用
### Hadoop新旧API对比及应用 #### 一、引言 随着Hadoop生态系统的不断发展和完善,其核心组件之一——MapReduce也在不断演进。为了更好地支持分布式计算的需求,Hadoop引入了新的API(Application Programming ...
Hadoop 2.6 API 是一个关键的组件在大数据处理领域,它提供了丰富的接口和工具,使得开发者能够构建分布式存储和处理系统。这个压缩包“hadoop2.6-api.zip”包含了Hadoop 2.6版本的核心API,使得开发者可以直接进行...
Hadoop API帮助文档,学习Nutch和Hadoop必备
这个API文档针对的是Hadoop 0.20.2版本,该版本虽然相对较老,但对于理解Hadoop的基本原理和API使用仍然具有参考价值。 Hadoop API提供了对分布式文件系统HDFS和MapReduce编程模型的接口,使得开发者能够构建大规模...
包含翻译后的API文档:hadoop-yarn-api-2.5.1-javadoc-API文档-中文(简体)-英语-对照版.zip 对应Maven信息:groupId:org.apache.hadoop,artifactId:hadoop-yarn-api,version:2.5.1 使用方法:解压翻译后的API...
Hadoop 0.20.2 API 是一个关键的开发资源,它为程序员提供了与Hadoop框架交互的接口和类的详细文档。Hadoop是一个开源的分布式计算框架,由Apache软件基金会维护,广泛用于大数据处理和分析。0.20.2是Hadoop的一个...
Hadoop 2.10.0中文版API是大数据处理领域的一个重要参考资料,它为开发者提供了详尽的接口文档,帮助他们理解和使用Hadoop生态系统中的各种组件。Hadoop是一个开源框架,主要用于分布式存储和分布式计算,是大数据...
在Hadoop生态系统中,API扮演着至关重要的角色,它们提供了与Hadoop分布式文件系统(HDFS)以及其他核心组件交互的接口。以下是对给定文件中提到的Hadoop API的详细说明: 1. **org.apache.hadoop.conf**: 这个包...