博客首页 → MapTask

最新文章列表

Hadoop源代码分析（MapTask）

接下来我们来分析Task的两个子类，MapTask和ReduceTask。MapTask的相关类图如下：<IGNORE_JS_OP style="TEXT-TRANSFORM: none; BACKGROUND-COLOR: rgb(255,255,255); TEXT-INDENT: 0px; FONT: 14px/21px Tahoma, 'Microsoft Yahei', ...
Hadoopmaptaskreducetask。超人学院 
超人学院 评论(0) 有28人浏览 2015-05-21 14:18

关于hadoop的maptask数量

今天看hadoop的JobClient的源码，在JobClient的init(JobConfig)函数中当mapred.job.tracker的值为默认值或者"local"时，将JobConfig的mapred.map.tasks设置为了1。觉得是不是太武断了点，不过在看JobConfig.setNumMapTasks(int)的注释时发现是这样说的： 这个MapTask数量的值 ...
hadoopmaptask数量 
youli9056 评论(2) 有3733人浏览 2012-08-26 21:09

hadoop学习笔记(三)——MapTask和ReduceTask

MapTask和ReduceTask   我们知道每一个Task都对应着一个jvm的执行，但是每一个Task都是在Child进程中执行的！我们来看一下Child类的主方法（源代码） public static void main(String[] args) throws Throwable {     
hadoopMapTaskReduceTask 
luliangy 评论(0) 有4000人浏览 2012-02-17 02:40

最近博客热门TAG

Java(141744) C(73651) C++(68608) SQL(64570) C#(59609) XML(59133) HTML(59043) JavaScript(54918) .net(54784) Web(54511) 工作(54116) Linux(50906) Oracle(49876) 应用服务器(43288) Spring(40811) 编程(39454) Windows(39381) JSP(37540) MySQL(37268) 数据结构(36423)

博客人气排行榜

    博客电子书下载排行

      >>浏览更多下载

      相关资讯

      相关讨论

      Global site tag (gtag.js) - Google Analytics