最新文章列表

转贴一个内部贴子--海量存储计算

  技术领域—海量存储计算   PB 时代的来临 Petabyte ,2 的50 次方个字节。这个对很多人还是很陌生的计量单位,已经变得越来越普遍和触手可及。2004 年8 月,GOOGLE 日常任务输入的数据已经达到了3PB ;2005 年Mark Hurd 从Teradata 来到HP 出任CEO ,开始建设基于Neo ...
run_xiao 评论(1) 有2779人浏览 2010-10-12 11:31

Hadopp简介

http://baike.baidu.com/view/908354.htm(自) 一个分布式系统基础架构,由Apache基金会开发。用户可以在不了解分布式底层细节的情况下,开发分布式程序。充分利用集群的威力高速运算和存储。Hadoop实现了一个分布式文件系统(Hadoop Distributed File System),简称HDFS。HDFS有着高容错性的特点,并且设计用来部署在低廉的 ...
疯狂的草儿 评论(0) 有1051人浏览 2010-10-11 13:48

NOSQL之旅-----HBase

原文 http://yuquan-nana.iteye.com/blog/613506   最近因为项目原因,研究了Cassandra,Hbase 等几个 NOSQL 数据库,最终决定采用 HBase 。在这里,我就向大家分享 ...
qmkemail 评论(0) 有1059人浏览 2010-10-10 18:54

HBase源代码-7-数据存储

7.存储模型         regionserver负责region内数据的存储及处理客户端的读写请求:         写请求:当regionserver接受到写请求,先写入一个WAL(write-ahead lo ...
run_xiao 评论(1) 有3708人浏览 2010-10-10 16:53

技术,持续关注

云计算(30%):NoSql,Hadoop,HBase 搜索引擎(20%):Lucene 系统架构(20%):高性能web系统 web开发框架(20%):Struts2,Spring,Hibernate,iBatis 设计模式(10%)
ITdavid 评论(0) 有245人浏览 2010-10-07 11:29

NOSQL之旅-----HBase(转)

最近因为项目原因,研究了Cassandra,Hbase 等几个 NOSQL 数据库,最终决定采用 HBase 。在这里,我就向大家分享一下自己对 HBase 的理解。 在说HBase 之 前,我想再唠叨几句。做互联网应用的哥们儿应该都清楚,互联网应用这东西,你没办法预测你的系统什么时候会被多少人访问,你面临的用户到底有多少,说不定 今天你的用户还少,明天系统用户就变多了 ...
ITdavid 评论(0) 有765人浏览 2010-10-04 17:23

HMaster -- ServerManager

HMaster -- ServerManager 1. 在HMaster的构造方法中创建. 2. 作用   a. serversToServerInfo -- ConcurrentHashMap<String, HServerInfo>(),保存RegionServer的信息,server names to serve ...
duming115 评论(0) 有1661人浏览 2010-09-30 15:58

Thread dump result of region server

"IPC Server handler 26 on 60020" tid=72 daemon=true priority=5 state=BLOCKED at org.apache.hadoop.hbase.regionserver.HLog.append at org.apache.hadoop.hbase.regionserver.HReg ...
standalone 评论(0) 有1537人浏览 2010-09-29 09:58

当hbase的master无法停掉的时候……

some times you will find the master in a hbase cluster cannot be stopped, so check the following two items suggested by some guy in hbase user mail list. But I'm not sure it helps.   > If zookeep ...
standalone 评论(0) 有1449人浏览 2010-09-28 11:19

hadoop发展趋势

Apache Nutch是Hadoop的源头,该项目始于2002年,是Apache Lucene 的子项目之一。至2004年,Google在OSDI上公开发表了题为“MapReduce: Simplified Data Processing on Large Clusters”的论文,受到启发的Doug Cutting等人开始实现MapReduce计算框架并与NDFS(Nutch Distribut ...
p_x1984 评论(0) 有2507人浏览 2010-09-27 21:13

HBase 源代码 客户端RPC实现

HBase 以客户端角色来调用服务器端的RPC实现 HBase 以客户端角色来调用服务器端的RPC实现 1. HBase的客户端RPC实际上是在Hadoop客户端RPC做的修改,具体的类为:    HBase org.apache.hadoop.hbase.ipc.HBaseRPC    Hadoop org.apache.hadoop.ipc.RPC    2. 大致流程    2.1 客户端( ...
duming115 评论(0) 有4454人浏览 2010-09-27 13:09

了解 NoSQL 的必读资料(转)

      NoSQL 是非关系型数据存储的广义定义。它打破了长久以来关系型数据库与 ACID 理论大一统的局面。NoSQL 数据存储不需要固定的表结构,通常也不存在连接 操作。在大数据存取上具备关系型数据库无法比拟的性能优势。该术语在 2009 年初得到了广泛认同。      当今的应用体系结构需要数据存储在横向伸缩性 上能够满足需求。而 NoSQL 存储就是为了实现这 ...
ITdavid 评论(0) 有313人浏览 2010-09-26 22:29

HBase vs Cassandra: 我们迁移系统的原因(标注版)

原文: http://ria101.wordpress.com/2010/02/24/hbase-vs-cassandra-why-we-moved/ 原作者:Dominic Williams 原文发布日期:February 24, 2010 at 7:27 pm 译者:王旭(http://wangxu.me/blog/ , @gnawux) ...
ITdavid 评论(0) 有856人浏览 2010-09-26 22:18

Hadoop简介(摘)

    对于Hadoop为什么 受到互联网等企业的追捧,查礼在接受采访时谈到,Hadoop作为一种支撑大规模互联网服务的软件平台和工具集,可以用来解决分布式计算中的很多问题,跟 商业软件相比,有两大主要优势:一是实用,效率较高,能够处理许多商业软件如传统数据库不能做的事情,特别是在大规模数据处理和计算方面,Hadoop的 优势非常明显;二是开源,成本低,而且容易修改,便于做二次开发,这尤其对于 ...
ITdavid 评论(0) 有487人浏览 2010-09-26 21:37

HBase(0.89.20100726) 关于RowLock

看了http://blog.csdn.net/TREND_CDC_SPN/archive/2010/05/04/5557626.aspx 这篇文章后才较仔细的看了下HBase的RowLock这一块,非常感谢趋势科技中国研发中心的热心者.   HBase(0.89.20100726)中的RowLock使用及实现   HBase只实现了基于row-key的锁机制。 1.客户端代码   RowLock ...
duming115 评论(0) 有2870人浏览 2010-09-26 17:40

HBase源代码阅读-6-数据逻辑模型HTableDescriptor

6.数据逻辑模型HTableDescriptor             HBase中表结构由HTableDescriptor描述(包括HColumnDescriptor),对表的新增\修改\删除操作在接口HMasterInterface中定义,而该接口由HMaster实现             (1)HTableDescriptor包含:                 表名,byte[] ...
run_xiao 评论(0) 有5109人浏览 2010-09-18 11:11

HDFS+MapReduce+Hive+HBase十分钟快速入门(二)

9.3.    编译 Hive 在编译 Hive 之前,请确保 HADOOP_HOME 和 IVY_HOME 两个环境变量已经生效。 1)         使用 svn 从 http://svn.apache.org/repos/asf/hadoop/hive/trunk 下载 Hive 源代码 2)       ...
samuschen 评论(0) 有2379人浏览 2010-09-17 11:17

HDFS+MapReduce+Hive+HBase十分钟快速入门

HDFS+MapReduce+Hive+HBase 十分钟快速入门   1.     前言 本文的目的是让一个从未接触 Hadoop 的人,在很短的时间内快速上手,掌握编译、安装和简单的使用。 2.     Hadoop 家族 截止 2009-8-19 日,整个 Hadoop 家族由以下几个子项目组成: ...
samuschen 评论(1) 有2537人浏览 2010-09-16 19:15

HBase源码阅读-5-HMaster对HRegion的管理

5.HMaster对HRegion的管理:master将region的分派,状态管理等工作委托给RegionManager         (1)RegionManager成员变量:rootRegionLocation,root region所在regionserver地址;                             rootScannerThread和MetaScanner,ro ...
run_xiao 评论(0) 有2632人浏览 2010-09-15 19:20

最近博客热门TAG

Oracle(49876) MySQL(37268) SQL Server(17623) Access(9329) DB2(4271) Redis(3181) Sybase(2414) 数据挖掘(2098) MongoDB(2014) SQLite(1817) PostgreSQL(1635) HBase(1492) NoSQL(1000) HSQLDB(620) Informix(581) Derby(578) Cassandra(375) PowerBuilder(333) CouchDB(113) TokyoCabinet(87)

博客人气排行榜

    博客电子书下载排行

      >>浏览更多下载

      相关资讯

      相关讨论

      Global site tag (gtag.js) - Google Analytics