博客首页 → HBase

最新文章列表

hbase优化总结二

hbase优化总结二 博客分类： hbase 来自:http://blog.linezing.com/2012/03/hbase-performance-optimization 本文主要是从HBase应用程序设计与开发的角度，总结几种常用的性能优化方法。有关HBase系统配置级别的优化，这里涉及的不多，这部分可以参考：淘宝Ken Wu同学的博客。 1. 表的设计 1.1 Pre-Creati ...
hbase 
huangxueyong 评论(0) 有360人浏览 2015-05-19 15:41

HBase性能优化方法总结（三）：读表操作

HBase性能优化方法总结（三）：读表操作 本文主要是从HBase应用程序设计与开发的角度，总结几种常用的性能优化方法。有关HBase系统配置级别的优化，可参考：淘宝Ken Wu同学的博客。 下面是本文总结的第三部分内容：读表操作相关的优化方法。 3. 读表操作 3.1 多HTable并发读 创建多个HTable客户端用于读操作，提高读数据的吞吐量，一个例子： 复制代码 static fina ...
hbase 
huangxueyong 评论(0) 有304人浏览 2015-05-19 15:35

HBase性能优化方法总结（二）：写表操作

HBase性能优化方法总结（二）：写表操作 本文主要是从HBase应用程序设计与开发的角度，总结几种常用的性能优化方法。有关HBase系统配置级别的优化，可参考：淘宝Ken Wu同学的博客。 下面是本文总结的第二部分内容：写表操作相关的优化方法。 2. 写表操作 2.1 多HTable并发写 创建多个HTable客户端用于写操作，提高写数据的吞吐量，一个例子： 复制代码 static fina ...
hbase 
huangxueyong 评论(0) 有384人浏览 2015-05-19 15:34

hbase优化总结一

来自： http://blog.csdn.net/rzhzhz/article/details/7481674 因官方Book Performance Tuning部分章节没有按配置项进行索引，不能达到快速查阅的效果。所以我以配置项驱动，重新整理了原文，并补充一些自己的理解，如有错误，欢迎指正。 配置优化 zookeeper.session.timeout 默认值：3分钟（180000ms） ...
hbase 
huangxueyong 评论(0) 有332人浏览 2015-05-19 15:20

分布式数据库HBase简介

   本文转自http://storage.chinabyte.com/420/12417420.shtml。 　　HBase 是一个面向列的分布式数据库。HBase 不是一个关系型数据库，其设计目标是用 ...
HBaseHDFShadoop关系型数据库 
seandeng888 评论(0) 有1676人浏览 2015-05-14 16:22

hbase0.96—+版本的endpoint

  HBase Coprocessor 之 endpiont(hbase 0.96.0) 分类： hbase2014-04-22 15:23 1661人阅读 评论(0) 收藏 举报 hbase
hbaseendpoint 
zhangxiong0301 评论(0) 有933人浏览 2015-04-21 17:16

hbase observer

Hbase自0.92之后开始支持Coprocessor（协处理器），旨在使用户可以将自己的代码放在regionserver上来运行，即将计算程序移动到数据所在的位置进行运算。这 ...
hbase协处理器oberver 
zhangxiong0301 评论(0) 有1001人浏览 2015-04-21 10:28

hbase block cache中的in-memory

每load一个block到cache时，都会检查当前cache的size是否已经超过了“警戒线”，这个“警戒线”是一个规定的当前block cache总体积占额定体积的安全比例，默认该值是0.85，即当加载了一个block到cache后总大小超过了既定的85%就开始触发异步的evict操作了。evict的逻辑是这样的：遍历cache中的所有block,根据它们所属的级别(single,multi,i ...
hbasein-memory 
zhangxiong0301 评论(0) 有1185人浏览 2015-04-21 10:26

在集群上执行mr(操作hbase)任务报错

通过eclipse 插件远程提交mr(有操作hbase)任务到集群执行没有问题， 打成jar包在集群上执行报错，错误如下： 15/04/19 00:20:40 WARN client.HConnectionManager$HConnectionImplementation: Encountered problems when prefetch hbase:meta table: org.apa ...
hbasehadoopHBaseZeroCopyByteStringcom.google.protobuf.HBaseZeroCopyByteStringjava.lang.IllegalAccessError 
beat_it_ 评论(0) 有3085人浏览 2015-04-19 15:30

eclipse提交mr(操作hbase)出错

通过eclipse 远程提交mr(处理文件到hbase)到hadoop集群报错： 错误信息如下： 2015-04-19 11:31:46,800 WARN  org.apache.hadoop.util.NativeCodeLoader - Unable to load native-hadoop library for your platform... using builtin-java ...
hadoopeclipsehbase127.0.0.10:0:0:0:0:0:0:1 
beat_it_ 评论(0) 有1987人浏览 2015-04-19 12:40

hbase0.94之后split策略

问题导读1.而在0.94版本之后，默认split策略修改为了什么？2.这种策略有什么好处？
hbasesplit 
zhangxiong0301 评论(0) 有841人浏览 2015-04-18 15:57

HBASE COPROCESSOR EndPoint实例

问题导读：1、统计总行数，理想的方式应该是怎样？2、什么是Endpoint，怎样去实现它 ？3、有哪几种方式去部署 ？
hbasecoprocessor 
zhangxiong0301 评论(0) 有1281人浏览 2015-04-18 15:26

Executing Java methods from HBase Shell

  HBase Shell is written in JRuby. As JRuby runs within Java Virtual Machine (JVM) , it is very easy to execute Java methods from HBase Shell. HBase ships with many Java utility classes; the ability ...
hbasejruby 
michael_roshen 评论(0) 有533人浏览 2015-04-14 18:25

HBase MSLAB和MemStoreChunkPool源码

  MSLAB工作原理，举个例子HStore在add的时候的例子，其他操作也差不多，很简单 MSLAB是解決menstorm的內存碎片，  MemStoreChunkPool是解決full gc頻繁，自己 ...
HBaseMSLABMemStoreChunkPool源码 
blackproof 评论(0) 有2049人浏览 2015-04-09 18:27

hbase split log转cloudera的文章

转 http://blog.cloudera.com/blog/2012/07/hbase-log-splitting/ cloudera的blog还是挺不错的   In the recent blog post about the Apache HBase Write Path, we talked about the write-ahead-log (WAL), which plays ...
hbasesplit logcloudera 
blackproof 评论(0) 有903人浏览 2015-04-09 13:52

HBASE在QIHOO 360搜索中的应用

【CSDN现场报道】中国IT界技术盛会——Hadoop与大数据技术大会（Hadoop&BigData Technology Conference 2012，HBTC 2012）于2012年11月30日-12月1日在北京新云南皇冠 ...
hbase 
zhangxiong0301 评论(0) 有1461人浏览 2015-04-07 14:10

hbase hlog源码

  HLog线程的启动入口：      HRegionServer启动线程 private void startServiceThreads() throws IOException {..... Threads.setDaemonThreadRunning(this.hlogRoller.getThread(), n + ".logRoller", ...
hbasehlog 
blackproof 评论(0) 有1882人浏览 2015-04-03 18:20

hbase mvcc

  MVCC相关源码：   在HBase put源码中 http://blackproof.iteye.com/blog/2197710   有mvcc用hregion的mvcc的write point，在生成mvcc的readpoint   KeyValueHeap类的next获取cell的时候使用keyvalue的mvcc的readpoint，判断是否取当前kv    /** ...
hbase 
blackproof 评论(0) 有922人浏览 2015-04-03 18:16

最近博客热门TAG

Oracle(49876) MySQL(37268) SQL Server(17623) Access(9329) DB2(4271) Redis(3181) Sybase(2414) 数据挖掘(2098) MongoDB(2014) SQLite(1817) PostgreSQL(1635) HBase(1492) NoSQL(1000) HSQLDB(620) Informix(581) Derby(578) Cassandra(375) PowerBuilder(333) CouchDB(113) TokyoCabinet(87)

博客人气排行榜

    博客电子书下载排行

      >>浏览更多下载

      相关资讯

      相关讨论

      Global site tag (gtag.js) - Google Analytics