最新文章列表

分布式计算开源框架Hadoop入门实践(二)

分布式计算开源框架Hadoop入门实践(二)         其实参看Hadoop官方文档已经能够很容易配置分布式框架运行环境 ...
elicer 评论(0) 有1104人浏览 2012-09-24 21:52

分布式计算开源框架Hadoop入门实践(一)

── 分布式计算开源框架Hadoop入门实践(一)     在SIP项目设计的过程中,对于它庞大的日志在开始时就考虑使用任务分解的多线程处理 ...
elicer 评论(0) 有1076人浏览 2012-09-23 18:09

Mongodb MapReduce编程模型

Mongodb官网对MapReduce介绍: Map/reduce in MongoDB is useful for batch processing of data and aggregation operations. It is similar in spirit to using something like Hadoop with all input coming from a coll ...
chenzhou123520 评论(0) 有10945人浏览 2012-08-20 00:55

MapReduce资料合集整理下载(持续更新中……)

======================================================================= ======================================================================= 1.孟岩博文:原文为《Map Reduce – the Free Lunch is not over?》,作者的目 ...
vivianskyer 评论(0) 有1293人浏览 2012-07-15 22:28

walter的hadoop学习笔记二 安装部署

转载请注明出处http://lt200819.iteye.com/blog/1473179 至于Hadoop是什么,能干什么之类的文章去hadoop官网去找吧,这里不累述。 给个传送门http://hadoop.apache.org 系统环境: linux版本:centos6.2 jdk:OpenJDK 1.6.0_22 下载hadoop 在http://www.apache.org/dyn/ ...
lt200819 评论(0) 有2005人浏览 2012-04-02 18:09

map-reduce编程核心问题

1-How do we break up a large problem into smaller tasks? More specically, how do we decompose the problem so that the smaller tasks can be executed in parallel? 2- How do we assign tasks to workers d ...
黎明lm 评论(0) 有1289人浏览 2012-02-22 13:38

快速例子学习mongodb的mapreduce

map和reduce是十分有用的操作,特别是在NOSQL中.本文简单小结下 在mongodb中对mapreduce的操作,以及在JAVA中如何操作. 1 启动mongodb    mongo启动即可 2 建立db    use test 3 加点记录    > book1 = {name : "Understanding JAVA", pages : 100} > ...
jackyrong 评论(0) 有22061人浏览 2012-02-17 08:34

没有Map和reduce的mapReduce:求解MapReduce过程

    用一个10行代码的案例,一个没有map和reduce的类分解Mapreduce过程。    操作过程:   1>:创建MapReduce项目,并配置Run Configuration选项中的Argument输入输出路径.如图        2>:再看代码       public class MyWordCount{ /** * @param args ...
十三月的 评论(2) 有4209人浏览 2012-02-07 10:50

mapreduce

MapReduce是处理/产生海量数据集的编程模型。,通过map()函数处理key-value对,产生中间key-value对,使用reduce()函数合并相同key的中间key/value中的value。 大数据量处理中的几种情况可使用MapReduece来解决: (1)URL访问频率统计,map函数处理请求和应答(URL,1)的log,reduce函数把具有相同URL的值合并,输出格式为成对的 ...
y_x 评论(0) 有1056人浏览 2011-12-24 10:45

求解大规模有向图的所有连通分量

              一 超大规模的稀疏图中的连通分量求解 背景       某地图厂商,需要检查道路网是否是连通的,比如是否存在孤岛(不能到达,也不能外出)?通常情况下,如果存在孤岛,说明道路勘测有问题。因此,随之而来的问题是: (1)不考虑道路方向,是否所有道路都是连通的? (2)如果考虑道路方向,是否任意2条道路均可以相互可达,如果不可以,输出可达情况,如存在path(u,v),但是不存 ...
lvdccyb 评论(0) 有6010人浏览 2011-07-28 20:44

最近博客热门TAG

Java(141747) C(73651) C++(68608) SQL(64571) C#(59609) XML(59133) HTML(59043) JavaScript(54918) .net(54785) Web(54513) 工作(54116) Linux(50906) Oracle(49876) 应用服务器(43288) Spring(40812) 编程(39454) Windows(39381) JSP(37542) MySQL(37268) 数据结构(36423)

博客人气排行榜

    博客电子书下载排行

      >>浏览更多下载

      相关资讯

      相关讨论

      Global site tag (gtag.js) - Google Analytics