本月博客排行
-
第1名
龙儿筝 -
第2名
lerf -
第3名
fantaxy025025 - johnsmith9th
- xiangjie88
- zysnba
年度博客排行
-
第1名
青否云后端云 -
第2名
宏天软件 -
第3名
gashero - wy_19921005
- vipbooks
- benladeng5225
- e_e
- wallimn
- javashop
- ranbuijj
- fantaxy025025
- jickcai
- gengyun12
- zw7534313
- qepwqnp
- 解宜然
- ssydxa219
- zysnba
- sam123456gz
- sichunli_030
- arpenker
- tanling8334
- gaojingsong
- kaizi1992
- xpenxpen
- 龙儿筝
- jh108020
- wiseboyloves
- ganxueyun
- xyuma
- xiangjie88
- wangchen.ily
- Jameslyy
- luxurioust
- lemonhandsome
- mengjichen
- jbosscn
- zxq_2017
- lzyfn123
- nychen2000
- forestqqqq
- wjianwei666
- ajinn
- zhanjia
- siemens800
- Xeden
- hanbaohong
- java-007
- 喧嚣求静
- mwhgJava
最新文章列表
DFS Read Exception: No live nodes contain current block
I met this problem when I testing the open file operation latency of HDFS. In the stress test, I continuously open and close files for about 1000 seconds.
See the resolution below. I get it from ...
如何在需求和设计中找到平衡点
在平常项目中经常会碰到需求和设计上的冲突,如何解决这种冲突呢?其中当属sns之类的网站,在面对大数据量,大并发我们该如何去解决?
比如一个游戏列表,在该列表中需要显示该款软件你的安装过的好友.这样的需要在sns之类的网站基本上不会提供,其主要原因时这种需求的实现需要的代价实在时太高,但是这样的需求其商业价值存在的意义务须质疑?但是在其基础架构没有搭建好之前觉得暂时还是不要实现,不然的话 ...
转帖: Anti-RDBMS: A list of distributed key-value stores
今天在研究couchdb时偶然发现的一个blog,列举了当前比较不错的分布式 key-value存储,并做了很有参考价值的分析,回帖也很有价值。
推荐对
分布式存储有兴趣的朋友阅读, 地址 http://www.metabrew.com/article/anti-rdbms-a-list-of-distributed-key-value-stores/
内容转帖如下:
...
hadoop hbase /etc/init.d style startup scripts
I scoured the InterTubes for example hadoop/hbase startup scripts and found absolutely none! I ended up creating a minimal one that is so far only suited for the Pseudo-Distributed Operation mode as it ...
Hadoop源代码分析(重读GFS的文章)
前面的内容基本完成了对HDFS的分析,很微观,从宏观的角度,重读一遍Google的论文,再次把握这个系统,还是很有意义的。
HDFS的设计目标和GFS是高度一致的,甚至HDFS上面的应用,也有对应的项目。
设计方面,从接口看,HDFS缺少快照和记录追加操作(下面分析),其他方面,如架构,单一主服务器,块尺寸,元数据的实现上,差别不大。操作日志的实现上,HDFS的实现方案应该更有优势,创建检查点对 ...
搞定Shindig和HBase的接口
最近就是在忙这个,搞得HDFS分析的更新都停下来了。几个感觉:
1:maven不是个好东西,eclipse对它的支持也很差。新添加一个文件主要要写版权声明,不然就出错;
2:XML到Java Bean的转换和Java Bean到XML的转换,在有了enum以后,变得不是很好处理;
3:Guice是个好东西,但通过annotation,有时在阅读code的时候不是很方便,不知道eclipse以后会不会 ...
free lunch of open source
Google File System
Google有Google File System;Doug Cutting在Nutch中把Google FS实现了,最后这个项
目从nutch中分出来,成为了现在的Hadoop — Hadoop Distributed FileSystem(HDFS)
(Java);Google 两个共同创始人的两个大学同窗(印度人)Anand Rajaraman和Venky ...
Hbase 性能测试
hbase performance
* test
hadoop0.18.1,hbase0.18.1
1master,4 region server (dual core cpu,dual cpu?)
已经有2m 数据
random write 1 client, Finished randomWrite in 499001ms at offset 0 for 1048576 ro ...
最近博客热门TAG
Oracle(49876) MySQL(37268) SQL Server(17623) Access(9329) DB2(4271) Redis(3181) Sybase(2414) 数据挖掘(2098) MongoDB(2014) SQLite(1817) PostgreSQL(1635) HBase(1492) NoSQL(1000) HSQLDB(620) Informix(581) Derby(578) Cassandra(375) PowerBuilder(333) CouchDB(113) TokyoCabinet(87)