最新文章列表

DFS Read Exception: No live nodes contain current block

I met this problem when I testing the open file operation latency of HDFS. In the stress test, I continuously open and close files for about 1000 seconds. See the resolution below. I get it from ...
standalone 评论(0) 有3429人浏览 2009-07-21 14:38

如何在需求和设计中找到平衡点

    在平常项目中经常会碰到需求和设计上的冲突,如何解决这种冲突呢?其中当属sns之类的网站,在面对大数据量,大并发我们该如何去解决?    比如一个游戏列表,在该列表中需要显示该款软件你的安装过的好友.这样的需要在sns之类的网站基本上不会提供,其主要原因时这种需求的实现需要的代价实在时太高,但是这样的需求其商业价值存在的意义务须质疑?但是在其基础架构没有搭建好之前觉得暂时还是不要实现,不然的话 ...
waitcoming 评论(1) 有82人浏览 2009-06-25 22:41

分布式数据库项目

Amoeba,based upon Mysql. in Java HBase,based upon Hadoop. in Java *HyperTable, optionally based upon Hadoop, in C++ learn more.
shannon977 评论(0) 有902人浏览 2009-06-11 23:47

HIVE问答, 某天的hadoop群聊天记录

某天晚上在hadoop群里一时兴起, 回答了一些hive相关的问题, hive的初学者可以看看 :)     梁建:    hive 主要用于 结构化数据 吗? 我:    结构化数据 梁建:    hadoop 0.19.1 和 那个  hive 版本 配置 我:    它走的是传统数据库, 有compiler解析sql,形成mapreduce任务 我:    hive都支持 ...
coderplay 评论(4) 有10898人浏览 2009-05-07 17:10

转帖: Anti-RDBMS: A list of distributed key-value stores

今天在研究couchdb时偶然发现的一个blog,列举了当前比较不错的分布式 key-value存储,并做了很有参考价值的分析,回帖也很有价值。     推荐对 分布式存储有兴趣的朋友阅读, 地址 http://www.metabrew.com/article/anti-rdbms-a-list-of-distributed-key-value-stores/     内容转帖如下: ...
skydream 评论(0) 有1719人浏览 2009-05-04 17:27

向HBase中插入数据

import java.io.IOException; import org.apache.hadoop.hbase.client.HTable; import org.apache.hadoop.hbase.client.Scanner; import org.apache.hadoop.hbase.io.BatchUpdate; import org.apache.hadoop.hbase.io ...
zkl_1987 评论(0) 有6551人浏览 2009-04-11 12:18

HBase的安装配置

首先需要先下载HBase最新且稳定的版本:http://www.apache.org/dyn/closer.cgi/hadoop/hbase 然后把它解压,把解压下来的文件移动到一个目录下如/home/user/hbase $ cd /home/user/hbase 进入此目录 $ vi conf/hbase-env.sh   export JAVA_HOME=/usr/lib/jvm/jav ...
zkl_1987 评论(0) 有3152人浏览 2009-04-10 17:46

hadoop hbase /etc/init.d style startup scripts

I scoured the InterTubes for example hadoop/hbase startup scripts and found absolutely none! I ended up creating a minimal one that is so far only suited for the Pseudo-Distributed Operation mode as it ...
gcgmh 评论(0) 有2214人浏览 2009-03-06 13:37

Hbase API TEST

一个使用HBase的例子,如下。 import java.io.IOException; import org.apache.hadoop.hbase.client.HTable; import org.apache.hadoop.hbase.client.Scanner; import org.apache.hadoop.hbase.io.BatchUpdate; import or ...
gcgmh 评论(0) 有2201人浏览 2009-03-02 15:25

关系数据库之外的选择

Perhaps you’re considering using a dedicated key-value or document store instead of a traditional relational database. Reasons for this might include: You’re suffering from Cloud-computing Mania. You ...
niyunjiu 评论(0) 有1468人浏览 2009-02-23 11:10

Hadoop源代码分析(重读GFS的文章)

前面的内容基本完成了对HDFS的分析,很微观,从宏观的角度,重读一遍Google的论文,再次把握这个系统,还是很有意义的。 HDFS的设计目标和GFS是高度一致的,甚至HDFS上面的应用,也有对应的项目。 设计方面,从接口看,HDFS缺少快照和记录追加操作(下面分析),其他方面,如架构,单一主服务器,块尺寸,元数据的实现上,差别不大。操作日志的实现上,HDFS的实现方案应该更有优势,创建检查点对 ...
caibinbupt 评论(5) 有11904人浏览 2009-01-19 16:37

myhbse:hbase for orm

http://code.google.com/p/myhbase/ 最近用hbase开发系统,没有好的数据库维护工具,很不方便,就自己写了一个类似于orm for hbase ,数据建模已经基本够用。
supermy 评论(1) 有1463人浏览 2009-01-16 08:59

搞定Shindig和HBase的接口

最近就是在忙这个,搞得HDFS分析的更新都停下来了。几个感觉: 1:maven不是个好东西,eclipse对它的支持也很差。新添加一个文件主要要写版权声明,不然就出错; 2:XML到Java Bean的转换和Java Bean到XML的转换,在有了enum以后,变得不是很好处理; 3:Guice是个好东西,但通过annotation,有时在阅读code的时候不是很方便,不知道eclipse以后会不会 ...
caibinbupt 评论(0) 有5192人浏览 2009-01-15 23:39

HBase简要评估

PPT,见附件。
chaoslawful 评论(0) 有1272人浏览 2009-01-05 15:22

free lunch of open source

Google File System Google有Google File System;Doug Cutting在Nutch中把Google FS实现了,最后这个项 目从nutch中分出来,成为了现在的Hadoop — Hadoop Distributed FileSystem(HDFS) (Java);Google 两个共同创始人的两个大学同窗(印度人)Anand Rajaraman和Venky ...
zhangyafei_kimi 评论(0) 有1342人浏览 2008-12-07 10:57

Hbase 性能测试

hbase performance     * test hadoop0.18.1,hbase0.18.1 1master,4 region server (dual core cpu,dual cpu?) 已经有2m 数据 random write 1 client, Finished randomWrite in 499001ms at offset 0 for 1048576 ro ...
stephen80 评论(0) 有2251人浏览 2008-12-02 10:16

什么是云计算呢

云计算这个新名词最近甚嚣尘上,最近周围不少朋友都在谈,有必要写一个关于云计算的科普了。   一般的业界比较喜欢用一些新名词来体现自己的战 ...
javaping2008 评论(0) 有1008人浏览 2008-11-11 16:08

bigtable ,hbase 学习

1.阅读 http://wiki.apache.org/hadoop/Hbase/HbaseArchitecture    hbase architect.  先阅读 bigtable .http://labs.google.com/papers/bigtable.html   Want asynchronous processes to be continuously updating    d ...
stephen80 评论(0) 有2549人浏览 2008-11-10 10:47

HBASE松散数据存储设计初识

引 最近关注Hadoop,因此也顺便关注了一下Hadoop相关的项目。HBASE就是基于Hadoop的一个开源项目,也是对Google的BigTable的一种实现。        BigTable是什么?Google
cenwenchu 评论(1) 有1922人浏览 2008-08-08 11:30

最近博客热门TAG

Oracle(49876) MySQL(37268) SQL Server(17623) Access(9329) DB2(4271) Redis(3181) Sybase(2414) 数据挖掘(2098) MongoDB(2014) SQLite(1817) PostgreSQL(1635) HBase(1492) NoSQL(1000) HSQLDB(620) Informix(581) Derby(578) Cassandra(375) PowerBuilder(333) CouchDB(113) TokyoCabinet(87)

博客人气排行榜

    博客电子书下载排行

      >>浏览更多下载

      相关资讯

      相关讨论

      Global site tag (gtag.js) - Google Analytics