本月博客排行
-
第1名
龙儿筝 -
第2名
johnsmith9th -
第3名
wy_19921005 - zysnba
- sgqt
- lemonhandsome
- sichunli_030
年度博客排行
-
第1名
宏天软件 -
第2名
青否云后端云 -
第3名
龙儿筝 - gashero
- wallimn
- vipbooks
- benladeng5225
- wy_19921005
- fantaxy025025
- e_e
- zysnba
- ssydxa219
- sam123456gz
- javashop
- arpenker
- kaizi1992
- tanling8334
- xpenxpen
- wiseboyloves
- xiangjie88
- ranbuijj
- ganxueyun
- sichunli_030
- xyuma
- wangchen.ily
- jh108020
- lemonhandsome
- zxq_2017
- jbosscn
- johnsmith9th
- Xeden
- luxurioust
- lzyfn123
- zhanjia
- forestqqqq
- ajinn
- nychen2000
- wjianwei666
- hanbaohong
- daizj
- 喧嚣求静
- mwhgJava
- silverend
- kingwell.leng
- lchb139128
- lich0079
- kristy_yy
- jveqi
- java-007
- sunj
最新文章列表
Hbase和RDBMS的区别
转自http://www.jdon.com/jivejdon/thread/38244
最近因为项目原因,研究了Cassandra,Hbase等几个NoSQL
数据库,最终决定采用HBase。在这里,我就向大家分享一下自己对HBase的理解。
在说HBase之前,我想再唠叨几句。做互联网应用的哥们儿应该都清楚,互联网应用这东西,你没办法预测你的系统什么时候会被多少人访问,你面临 ...
Hadoop 客户端长期运行造成Datanode 连接泄露, 0.21.0 仍然存在这问题
上篇文章中说到我在Hadoop的50070的web页面增加了每个node的xceiver count,这个问题也是通过这个指标发现的。
由于我的客户端从始至终都是一个Filesystem实例,因此在put完文件时java实例并不会销毁,客户端在运行较长时间后,发现每个Node的xceiver count值很高,当初以为是节点读写量比较大,但通过stack分析来看,却是写的线程比较多,难道又是当初的 ...
hbase0.20.支持多个主节点容灾切换功能(只激活当前某个节点,其他节点备份)
http://wiki.apache.org/hadoop/Hbase/MultipleMasters
发现Hbase支持多个主节点的,万一某个主节点挂了,还可以切换到备用节点上。
据说hadoop-0.21支持备份主节点,万一主节点挂了的话,还是可以切换的。
不过本人稍微尝试了下hbase的主节点切换功能,不太好使。并且还没有支持hadoop-0.21.0版本的hbase出 ...
升级hadoop0.20.2到hadoop-0.21.0
按照新的文档来 更新配置: http://hadoop.apache.org/common/docs/current/cluster_setup.html
发现多了很多东西,新的文档也比以前的详细,好的多.
不过此次只为了升级hadoop0.20.2到hadoop-0.21.0
看看发布的版本:http://hadoop.apache.org/common/relea ...
HBase源码阅读-3-HRegionServer
3.HRegionServer:管理regions,并向HMaster报告自己状态
3.1 regionserver启动过程
(1)读取一些配置:机器名,端口,客户端重试次数,与master交互间隔,rpc超时
(2)创建Worker线程处理来自master的请求(????)
(3)创建一 ...
HBase源代码阅读
最近比较空闲,好好研究下了下HBase的源码(0.89.20100621),其中一部分整理了下,写了些notes,贴出来Share一
下。后面计划期望能有空整理成一个完整的系列出来:
1.脚本
2.HMaster
3.HRegionServer
4.HMaster与HRegionServer的RPC
5.HMaster对HRegion的管理
...
Fedora13中安装HBase笔记
1.(1)HBase需要Hadoop和jdk的支持,故需要先安装好jdk和hadoop并配置好,具体步骤可参见上篇日志。
(2)在 Hadoop 分布式文件系统中创建两个目录 hbase 和 tmp ,这两个目录将在下面安
装 HBase 的过程中使用,切换到目录$HADOOP_HOME/在 Shell 中输入命令如下:
bin/hadoop dfs –mkdir hbase
bin/h ...
分布式online与offline设计 slides
花了两个小时简单了做了一个ppt,给兄弟公司相关人员讲解offline分析(例如hadoop,hive, pig这种应用)与online(例如bigtable, hbase)在设计上的不同,希望能解开大家对两种不同应用在设计上的一些误区。
HBase的Region分配探索
Region
分配
HBase
的
cluster
中,
Region
是如何分配这个问题,困扰了我很久,经过代码分析和调试,得出了一些见解,缺点和错误请大家批评指正。
参与
Region
分配的重要对象
在
Region
分配过程中,起着重要作用有如下一些对象。
HMaster—
是
HBase
中的 ...
最近博客热门TAG
Oracle(49876) MySQL(37268) SQL Server(17623) Access(9329) DB2(4271) Redis(3181) Sybase(2414) 数据挖掘(2098) MongoDB(2014) SQLite(1817) PostgreSQL(1635) HBase(1492) NoSQL(1000) HSQLDB(620) Informix(581) Derby(578) Cassandra(375) PowerBuilder(333) CouchDB(113) TokyoCabinet(87)