本月博客排行
-
第1名
Xeden -
第2名
fantaxy025025 -
第3名
bosschen - paulwong
- johnsmith9th
年度博客排行
-
第1名
青否云后端云 -
第2名
宏天软件 -
第3名
gashero - gengyun12
- wy_19921005
- vipbooks
- e_e
- benladeng5225
- wallimn
- ranbuijj
- javashop
- jickcai
- fantaxy025025
- zw7534313
- qepwqnp
- robotmen
- 解宜然
- ssydxa219
- sam123456gz
- zysnba
- sichunli_030
- tanling8334
- arpenker
- gaojingsong
- xpenxpen
- kaizi1992
- wiseboyloves
- jh108020
- xyuma
- ganxueyun
- wangchen.ily
- xiangjie88
- Jameslyy
- luxurioust
- mengjichen
- lemonhandsome
- jbosscn
- nychen2000
- zxq_2017
- lzyfn123
- wjianwei666
- forestqqqq
- ajinn
- siemens800
- hanbaohong
- 狂盗一枝梅
- java-007
- zhanjia
- 喧嚣求静
- Xeden
最新文章列表
大数据十年内会成为屌丝产业
先从马云说起,马云最近几件事很闹心,阿里的股票从最高的119跌倒了81块,跌去了三分之一,年初取消了全员红包搞得民怨沸腾,天猫总裁乔峰被免职,网上传言纷纷,甚至还有小道消息是天猫团队周末不加班导致。经过前面两年吹泡泡之后,淘宝还是要终归回归企业发展的本质来,就是要赚钱。前面我写过一篇文章《泼一泼阿里的冷水,阿里几大隐忧》,我还是维持我当时的看法淘宝仍能估值太高。
Automatic Management of Data and Computation in Datacenters
最近在研究数据中心的数据管理和性能优化,看了一篇2010的论文Nectar:Automatic Management of Data and Computation in Datacenters,还是有一定的启发的,简要介绍给大家。详细的建议大家download论文下来看下。
Nectar核心思路有两个:
Memcache和Redis比较
Today marks the day that memcached no longer has any significant advantages over redis, while redis continues to have many distinct advantages over memcached. Today, redis 3.0, which includes Redis Cl ...
Spark学习-3 运行一个example
开始学习Spark了,先看看Spark能做点什么吧。
最好的方式就是先运行个例子程序。先从Spark网站下载一个运行环境(我的运行环境是Win7, 64bits) 。
我们在官方网站: http://spark.apache.org/downloads.html下载一个版本:
我选 Spark 1.0 + Prebuild for Hadoop 2.3, Link为
http://d3kbcq ...
Spark的学习2-IDE
当使用Maven构建好项目后,现在要开始学习Spark的设计及具体实现,就是源码了。
在Google上查到的比较多的IDE就是Scala + Eclipse , Scala + NetBeans和Scala ...
spark源码分析--spark的任务调度(standalone模式)
原创,转载请注明出处 http://baishuo491.iteye.com/blog/1994026 ,作者邮箱:vc_java@hotmail.com,新浪微博:爱看历史的码农--白硕
在sparkContext的建立过程中(更细致的说是clientActor的preStart回调函数中),会向master发送RegisterApplication消息master ! RegisterApp ...
spark源码分析--Master和worker建立连接
原创,转载请注明出处 http://baishuo491.iteye.com/blog/1990242。作者邮箱 vc_java@hotmail.com
Spark的master启动后,等待work通过spark://master'ip:7077的url去连接Master.
...
Apache Hadoop: Shark与Impala相比(翻译)
内容来自Reynold Xin
Berkeley的博士,此人领导了Shark的开发(在加州伯克利分校AMP实验室)。
本文只做翻译,不对两个系统的优劣做评价。
总体上
Shark扩展了Apache Hive,大大加快在内存和磁盘上的查询。而Impala是企业级数据仓库系统, 可以很好地使用Hive/ HDFS,从架构层来说,类似于传统的并行数据库。这两个系统有着很多共同的目标,但也有很大差异。
...
IT几个发展趋势总结
1;PC出货量下降百分之七,平板电脑出货挤占了PC的出货。随着穿戴设备发展,职能家电等各种智能的发展。在可以遇见的未来,PC的功能会逐渐弱化,有一天PC会变成专业设备。
2;对消费者电子设备来说,硬盘死期将至。硬盘的今天就是磁带的昨天。传统硬盘,速度和体积已经严重不适合消费者电子领域使用。
3;随着云计算发展。摩尔定义已经不合时宜,云会释放终端性能增长的压力。一个更快的网络和更丰富的应用才是大家急需 ...
Pig Hive HBase Zookeeper安装和配置
Pig Hive HBase Zookeeper安装和配置
evernote共享链接: https://www.evernote.com/pub/xuyuantree/20_
hadoop@zqh:~$ cd /usr/local
hadoop@zqh:/usr/local$ sudo mkdir pig
hadoop@zqh:/usr/local$ cd /home/zq ...
Google三大论文中文版 pdf
作者:JesseZhang (CNZQS|JesseZhang)
博客地址:http://www.cnzqs.com
网上找到的Google三大论文的中文版,包括:bigData、GFS、MapReduce,共享给大家
下载地址:http://t.cn/S4nMUi
-----------------------------------------