年度博客排行
-
第1名
龙儿筝 -
第2名
宏天软件 -
第3名
青否云后端云 - wallimn
- vipbooks
- gashero
- wy_19921005
- benladeng5225
- fantaxy025025
- e_e
- javashop
- tanling8334
- sam123456gz
- zysnba
- arpenker
- kaizi1992
- xpenxpen
- lemonhandsome
- xiangjie88
- ganxueyun
- xyuma
- wangchen.ily
- Xeden
- zhanjia
- jh108020
- johnsmith9th
- zxq_2017
- jbosscn
- forestqqqq
- ajinn
- daizj
- wjianwei666
- ranbuijj
- 喧嚣求静
- sichunli_030
- silverend
- kingwell.leng
- lchb139128
- kristy_yy
- lich0079
- jveqi
- lzyfn123
- java-007
- sunj
- yeluowuhen
- lerf
- xiaoxinye
- flashsing123
- lxguy
- zhangjijun
最新文章列表
Hadoop LineRecordReader实现分析
直接上代码:
package org.apache.hadoop.mapreduce.lib.input;
import java.io.IOException;
import org.apache.hadoop.conf.Configuration;
import org.apache.hadoop.fs.FSDataInputStream;
import org.apac ...
hadoop目前遇到的问题
现在感觉瓶颈是没有真正运行的hadoop的实例,资料太少,完全无从下手
MapReduce的特点是适合一次写,多次读的场景,但这是怎么实现的呢?
例如一次写,就类似于建立数据结构,然后建立索引,或者再排序一下,数据的位置再调整一下,这样就有利于多次读的操作了。
就比如权威指南中的天气的例子,我可以把所有的数据,取得年份日期和温度,其他数据都放弃,然后排序,甚至是建立一个索引,把这个数据保存在新的文 ...