最新文章列表

HBase入门(转)

HBase入门(转) 转自:http://labs.chinamobile.com/mblog/4110_22332?wralxianxrnx HBase是Hadoop的一个子项目,HBase采用了Google BigTable的稀疏的,面向列的数据库实现方式的 ...
michaellou 评论(0) 有836人浏览 2011-03-14 17:19

构建多HMaster节点的hbase集群

hbase支持多节点hmaster的集群,热备效果有待试验。 构建多Hmaster时首先确保你的单Hmaster集群构建正确并且完美启动。 剩下的工作很简单。 在另一台HMaster的机器上配置hbase.master为这台机子的hostname并且启动hmaster即可,这样这台hmaster会自动去连接已启动的zookeeper与HRegionServer。 启动脚本:在bin目录下,输入./h ...
aronlulu 评论(0) 有5975人浏览 2011-03-14 15:55

海量数据存储之存储设计(二)

本节重点讲述数据的Durability(可靠性),纵然CAP理论中的三个关键点(Consistent, Available, Partition-Tolerant )无法达成一致,A和P目前来看变化不太多,可能变化比较多的是在C上,将一致性模型的文章毫无疑问首推Amazon CTO:Werner Vogels的两篇文章: Eventually Consistent Eventually Con ...
forchenyun 评论(2) 有6610人浏览 2011-03-13 17:58

Java企业搜索平台:起点R3(Rivulet ES) V5.0 正式开源

  Java企业搜索平台:起点R3(Rivulet ES) V5.0 正式开源       起点R3企业级搜索引擎是起点软件提供的企业搜索解决方案,支持企业环境下的数据访问控制(ACL),能够通过定义用户数据访问权限来控制检索数据的安全。       R3是一个强大的,高性能的JAVA企业级搜索引擎产品,R3构建于Solr和Lucene之上,集成了POI、PDFBox和Apache Tika等 ...
jaddy0302 评论(14) 有1345人浏览 2011-03-10 19:39

HBase如何迁移数据

HBase如何迁移数据?这里有个方案:http://blog.mozilla.com/data/2011/02/04/migrating-hbase-in-the-trenches/ ,我还未验证,因为我碰到了更加棘手的问题,我的两个集群在两个局域网,没法通信。(不过可以有一台机双网卡连接两个集群)。   先了解下 /app/cloud/hadoop/bin/hadoop distcp src ...
iammonster 评论(0) 有6502人浏览 2011-03-10 13:42

YunTable开发日记(15)-0.9版RC发布!!!

由于之前YunTable开发日记已经接近一些不优雅的数字,所以2011年直接从15开始,呵呵。 0.9版RC的发布 今天将正式对外发布YunTable0.9版RC(Release Candidate,发布候选版),大家可以通过“svn checkout http://yuntable.googlecode.com/svn/tags/YunTable_Release_0.9 yuntab ...
isiqi 评论(0) 有978人浏览 2011-02-14 15:10

Cloudera’s Distribution for Apache Hadoop

记得从0.1版本就使用过,当时还是用的是Apache Hadoop,现在都已经有自己的增强版本了,真的不错。 HDFS – Self healing distributed file system MapReduce – Powerful, parallel data processing framework Hadoop Common – a set of utilities th ...
ihuashao 评论(0) 有682人浏览 2011-02-10 08:45

Italk75期主讲吴朱华专访—“YunTable-云时代的数据库”

如果大家明天晚上人在张江,并且有时间的话,请参加一下,而且如果有机会的话,大家可以一起聊聊云计算! 随着互联网的不断发展,各种类型的应 ...
isiqi 评论(0) 有847人浏览 2010-12-21 21:18

云计算背后的秘密(4)-Chubby

简单的来说,Chubby属于分布式锁服务,通过Chubby,一个分布式系统中的上千个client都能够对某项资源进行“加锁”或者“解锁”,常用于BigTable和MapReduce ...
isiqi 评论(0) 有759人浏览 2010-12-13 17:26

云计算背后的秘密(3)-BigTable

由于在Google的数据中心存储PB级以上的非关系型数据时候,比如网页和地理数据等,为了更好地存储和利用这些数据,Google开发了一套数据库系统,名 ...
isiqi 评论(0) 有836人浏览 2010-11-30 01:18

NoSQL的Spring

这几天一直在研究NoSQL的技术,所以在这段时间内也看了很多NoSQL的文档和资料,其中最让我获益匪浅的莫过于发表InfoQ的NoSQL in the Enterprise,而且本篇文 ...
isiqi 评论(0) 有973人浏览 2010-08-23 15:27

Apache Hadoop 项目介绍

ApacheHadoop 项目开发的开源软件提供了可靠、可伸缩、分布式的计算。它是Google类似技术的开源版本。使用Hadoop的公司有Yahoo!, Facebook, Twitter, IBM等。 为什么要开发这样的系统呢?“When data exists in this quantity (terabit/day or petabit/day), one of the process ...
ihuashao 评论(0) 有1104人浏览 2010-08-11 05:42

YunTable开发日记(8)-聊聊分布式数据库的作用

在发布YunTable0.1版之后,我将这个好消息和我一个在中国移动工作的同济同学分享了,他首先向我表示祝贺,但是他不理解像YunTable这样的分布式数据库和Oracle这样的关系型数据库有什么区别?当接到这个问题的时候,我并没有立即回答,因为我感到这个疑问不仅是他一个人会有,而且估计有很多同学也有类似的疑问,这就是本文的由来。但在介入分布式数据库之前,让我们剖析一下关系型数据库有哪些不足。 ...
isiqi 评论(0) 有768人浏览 2010-07-17 16:38

YunTable开发日记(7)- BigTable的功能集

本文是HBase的欧洲传道者LARS GEORAGE的HBase vs. BigTable Comparison(需要)一文的节选翻译版。 论文中提到的特性 首先,向大家介绍在2006年OSDI大会上发表B ...
isiqi 评论(0) 有882人浏览 2010-07-15 11:44

YunTable 0.1版正式发布!!!

经过两个星期的努力(如果刨去学习C语言的时间),YunTable终于走完一个从无到有的历程,今天,也就是2010年7月12日,YunTable正式对外发布其0.1版,在0.1版中YunTable虽然在特性,优化和内存管理这三方面还有很多的缺失,但是总体而言,已经实现了一个身为BigTable克隆的基本要求,也就是分布式查询和管理,以及以column为核心的存储。这是0.1版的下载链接(上次因为对 ...
isiqi 评论(0) 有721人浏览 2010-07-12 19:18

YunTable开发日记(5)- 发布0.01版

本文是《YunTable开发日记》的第五篇。 虽然进度比我之前预想的慢了很多,但是经过最近几天的coding,终于完成YunTable的0.01版,虽然在支持的功能和之前预期的相比简单了很多,如果大家对这个0.01版感兴趣的话,可以通过这个链接下载。下面是关于0.01版的综述,使用教程和计划。 综述 在功能方面,0.01版的YunTable还远算不上是一个BigTable的克隆,但基 ...
isiqi 评论(0) 有833人浏览 2010-07-05 17:33

YunTable开发日记(4)-BigTable的存储模型

本文是《YunTable开发日记》的第四篇。 经过这几天的开发工作,我已经将YunTable所需的一些基本类库搭建起来,比如内存管理,字符串处理,I/O处理和 ...
isiqi 评论(0) 有846人浏览 2010-06-28 13:25

2010年6月的好文推荐

这是第一期好文推荐,主要是将一些我认为非常不错的技术文章推荐给大家,希望大家能够喜欢。 最近发现一个非常不错的博客,叫dbthink,里面有很 ...
isiqi 评论(0) 有711人浏览 2010-06-21 17:21

YunTable开发日记(1)- 计划

因为书的初稿已经写好,所以现在这个阶段主要以研发产品原型为主,而且将关注点主要集中于下一代云计算系统。可惜的是,我之前主要使用的开发语言是Java,而对常用于构建云计算系统中的C语言不是很熟悉,同时由于C的灵活性和其牵涉到很多底层技术,使得这个坎非常不好过,但是既然已经走到了这步,不论是再艰难的东西,也要坚持下去。那么什么方式能最有效地提升编程能力呢?对于有一定编程的经验的人而言,答案非常简单, ...
isiqi 评论(0) 有826人浏览 2010-06-07 12:45

Hadoop Hbase适合存储哪类数据?

Hadoop Hbase适合存储哪类数据? 最适合使用Hbase存储的数据是非常稀疏的数据(非结构化或者半结构化的数据)。Hbase之所以擅长存储这类数据,是因为Hbase是column-oriented列导向的存储机制,而我们熟知的RDBMS都是row- oriented行导向的存储机制(郁闷的是我看过N本关于关系数据库的介绍从来没有提到过row- oriented行导向存储这个概念)。 ...
ihuashao 评论(0) 有633人浏览 2008-04-27 22:37

最近博客热门TAG

Oracle(49876) MySQL(37268) SQL Server(17623) Access(9329) DB2(4271) Redis(3181) Sybase(2414) 数据挖掘(2098) MongoDB(2014) SQLite(1817) PostgreSQL(1635) HBase(1492) NoSQL(1000) HSQLDB(620) Informix(581) Derby(578) Cassandra(375) PowerBuilder(333) CouchDB(113) TokyoCabinet(87)

博客人气排行榜

    博客电子书下载排行

      >>浏览更多下载

      相关资讯

      相关讨论

      Global site tag (gtag.js) - Google Analytics