- 浏览: 261433 次
- 性别:
- 来自: 成都
文章分类
最新评论
-
zhagener:
package com.huawei.qyq.impl;imp ...
EasyMock使用说明 -
LetCode:
将String转换成InputStream -
Mr_kimilo:
MyEclipse6.5安装的时候出现问题: JS Test ...
javascript测试工具: JsTestDriver -
jersey109:
我同意楼下的,SQLException和IOException ...
check exception和uncheck exception -
jersey109:
楼主,你不说CODE,我觉得你对RuntimeExceptio ...
check exception和uncheck exception
最近,大量新的非关系式数据库如雨后春笋般出现在云里云外。这其中所释放出的一个关键信息是:“如果想获得丰富而随需应变的可伸缩性,你需要一个非关系数据库。”
如果这是真的,那么这是不是一个迹象,表明曾经强大的关系式数据库终于在它的盔甲上出现了裂缝?关系数据库的日子是不是到头了?该隐退了?在本文中,我们将检视当前这种在特定情况下摆脱关系数据库的趋势,并分析这对于关系数据库的未来意味着什么。
关系数据库已过而立之年。在此期间,短暂爆发过一些所谓终结关系数据库的革命。当然,最终都失败了,丝毫没有动摇到关系数据库的主导地位。
先了解一些背景
一个关系数据库基本上就是一个表(实体)集合。表由列和行(变量集)构成。这些表存在约束,相互之间定义了关系。关系数据库使用SQL进行查询,结果集通过访问一个或多个表的查询生成。单个查询里被访问到的多个表,一般是利用在表关系列里定义的范式被“连接”到一起的。 规范化 是关系数据库使用到的一种数据结构模型,能保证数据一致性并消除数据冗余。
关系数据库在 关系数据库管理系统 (RDBMS)的帮助下得以促进。我们今天所使用的绝大部分数据库系统都是RDBMS,包括 Oracle,SQL Server, MySQL,Sybase,DB2,TeraData等等。
关系数据库占据统治地位的原因并非微不足道的。它们持续提供了简单性、健壮性、灵活性以及性能的最佳组合,并带来了通用数据管理的兼容性。
不过,为了实现这一切,关系数据库的内部不得不复杂得难以置信。举个例子说,一个相对简单的SELECT语句可能有着上百条执行路径,优化程序在运行时必须进行评估。这一切都被隐藏起来,对用户都是不可见的,RDBMS通过使用类似基于代价的算法来决定最佳响应请求的“执行计划”。
关系数据库的问题
尽管RDBMS为数据库用户提供了简单性、健壮性、灵活性、性能、可伸缩性以及兼容性的最佳组合,但它在其中每个领域里的性能,不一定就优于其他追求某一项好处的独立替代方案。迄今为止这不是太大的问题,因为RDBMS的普遍优势已经压制了开疆拓土的需求。不过,如果你的确存在着通用关系数据库无法满足的要求,替代的方案则总可以填补这些壁龛。
今天,形势略有不同。对于数量不断增长的应用程序而言,上述的其中一项好处变得越来越重要;虽仍被视为特殊,但正迅速成为主流,以至于对于不断增长的数据库用户来说,其在重要性方面已经开始侵蚀掉其它的好处了。这项好处就是可伸缩性。随着越来越多如Web服务之类承受大规模工作负荷的应用的发行,其对可伸缩性的需求,首先有可能会改变得非常迅速,其次会变得无比庞大。第一种场景下,如果你只有一个龟缩在一所房子内的服务器中的关系数据库,情况将难以管理。举个例子,如果你的负载一夜之间增加了2倍,你能用多快的速度去升级硬件?第二种情况下,一般的关系数据库是也很难管理的。
关系数据库的确能伸缩自如,但通常只能单台服务器节点上进行。一旦单节点的能力抵达上限,你就得通过多服务器节点来往外扩展来分发负载。这时候关系数据库的复杂性就开始影响其潜在的扩展规模了。试图扩展到成百上千个节点,而不是几个,将导致不堪复杂性之重负,这一特点使得RDBMS在大型分布式系统平台市场里的生存能力被大幅削减。
为了让云服务变得可行,供应商不得不突破这种限制,因为一个缺乏伸缩性的数据仓储的云平台根据就不能算一个平台。因此,为了能向客户提供的一个伸缩自如的空间去存放应用数据,供应商实际上只有一种真正的选择。他们不得不实现一种新型的关注于可扩性的数据库系统,而牺牲掉关系数据库所带来的其他好处。
这些努力,再加上那些已有的特殊供应商,已经带来了一种新型的数据库管理系统。
新品种
这种新型的数据库管理系统通常被称为键/值存储。实际上,尚无正式的名字,因此你可能会看到它被称为面向文档的、面向互联网的、面向属性的、 分布式数据库 (尽管这也可以是关系式的)、共享排序数组、 分布式哈希表以及键/值数据库。虽然每个名字都指出了这种新方案的某种特征,但都是基于一个主题的派生,这个主题就是我们将要命名的键/值数据库。
不关你怎么称呼它,这个“新型”的数据库其实已经在某些普通关系数据库不合适的特殊应用里使用了很长时间了。不过如果没有Web和云应用所带来的伸缩性的话,它很可能还得继续呆在深闺大院里。现在的挑战是我们得弄清楚,究竟是它还是关系数据库更适合于特定应用。
关系数据库和键/值数据库从根本上来说是完全不同的,分别被设计用于满足不同的需求。迄今为止,一项一对一的比较能有助于你理解这种差异性,不过在开始之前,先让我们来看看下面:
没有实体连接
键/值数据库是面向项目的,这意味着所有与项目有关的数据都被存储进该项目中。一个域(你可以把它视为表)可以包含大量不同的项目。比如说,一个域里可以同时包含客户项目和定单项目。这意味着在一个域内,不同项目间的数据通常是重复的。这在实践上是可行的,因为磁盘空间相对廉价。但这个模型允许一个单一的项目包含完所有相关数据,就可以通过消除对多表的数据连接的需求来改善可扩性。而在关系数据库中,那样的数据需要被连接到一起,以便能重组为相关属性。
不过虽然在关系数据库中的需求在键/值数据库已大为减少,有些东西还是不可避免的。那些关系一般存在于核心实体之间。比如说,定单系统会有这样一些项目,其中包含有客户、产品及定单的数据。 这些是否在相同或不同的域都是无关紧要的;但是当客户下单时,你大概不会想把客户和产品的属性都放进同一张定单里吧。
相反,定单需要包含相关键值指向客户和产品。尽管这在键/值数据库是完全可行的,这些关系却不会在数据模型本身内进行定义,因此数据库管理系统是无法强制要求这些关系的数据一致性的。这意味着你可以删除客户及其已订购产品。确保数据完整性的责任完全落在了应用的身上。
键/值存储:优点
有两点键/值数据库是明显优于关系数据库的。
云的最佳搭档
第一个好处是它们简单,并因此比关系数据库伸缩起来要自如得多。如果你正在打算把一个内部系统聚拢起来,试图把预期中规模庞大的伸缩需求交给数据仓储背后那数十上百台服务器去处理,那么就请考虑一下键/值存储。
由于键/值数据库简单,且动态可扩,它们也是提供多用户、web服务的平台数据存储的供应商的选择。这种数据库提供了相对廉价的设计存储平台,并拥有庞大的扩充潜力。用户通常只需用多少就给多少,而其需求增长时配额能随之而增。与此同时,供应商能基于总用量动态扩充平台,整个平台的大小几乎不受限制。(译者:最典型的就是各种所谓支持多少G的邮箱应用了)
编码得心应手
关系数据库模型和应用代码对象模型通常是以不同方式建立起来的,这导致了不兼容性。开发人员通过将代码映射到关系模型去克服这种不兼容性。这个过程一般被称为 对象-关系映射,基本上等于是“管道”代码,没有直接明确的价值,却耗费掉了应用开发的大量时间和精力。另一方面,许多键/值数据库在结构中保留的数据,与底层代码中的对象类的映射关系却要直接得多,从而显著减少了开发时间。
其它一些支持这种数据存储的理由,比如“关系数据库相比之下更为笨拙(不管这意味这什么)”等,则不太令人信服。不过在跳上这趟键/值数据库的列车之前,请先考虑一下它的缺点。
键/值存储: 缺点
关系数据库固有的约束保证数据在最低层次拥有完整性。违反完整性约束的数据在物理上进不了数据库中。这些约束在键/值数据库中是不存在的,因此确保设计完整性的责任全部落到了应用程序的肩上。但是程序会经常出现Bug。在一个设计得当的关系数据库里,Bug通常不会导致数据完整性问题;但是在键/值数据库里的bug就很容易引起数据完整性问题。
关系数据库另一项关键的好处就是它强迫你经过一个数据建模的过程。如果做得好,这个建模过程所创建出的数据库的逻辑结构,就应该是映射它所要包含的数据,而非映射应用程序的结构。然后数据从某种程度上就变得是独立于应用的,意味着其他应用同样也能使用统一数据集,从而应用逻辑的改变不会影响到底层的数据模型。而键/值数据库要实现这一过程的话,就要以类的建模实践替代关系数据建模,以便在数据的自然结构基础上创建出通用的类。
还有别忘了兼容性。面向云的数据库不像关系数据库,并没有多少办法去共享标准。尽管它们都有着类似的概念,却各有着自己的API、特定的查询接口及特性。因此,你真的要信任你的供应商,因为就算你对服务不满意也覆水难收了。还有,由于目前所有的键/值数据库均处于测试阶段,这种信任的风险可比对老派的关系数据库要高的多。
分析上的限制
在云内,键/值数据库一般是多租户的,这意味这许多用户和应用将使用同一系统。为了防止任一进程导致共享环境过载,大部分云数据存储严格限制了单一查询可能导致的总影响效应。举个例子,在 SimpleDB里,你不能执行过程超过5秒钟的查询。而在Google的AppEngine Datastore里,任何查询结果都不允许超过1000条。
这些限制对于你的面包-奶油式的应用逻辑(添加、更新、删除、获取少量内容)而言不成问题。但是当你的应用取得成功的时候会发生什么呢?你已经攫取了许多用户,获得了大量数据,现在你想为客户创造新价值,或者也许还想利用这些数据产生新的收入。你就会发现自己被严重限制了,甚至连直接的分析型查询都很困难。在此类平台上,类似追踪(用户的)使用模式、基于用户历史提供建议等事情,即便不是不可能也是非常困难的。
这种情况下,你将不得不实现一个从键/值数据库分离出来的,独立的分析型数据库,以便执行那样的分析。再想想你该在哪里才能做这样的事情?又该如何去做?是不是应在云上维护它?还是投资于一个现场(译者:on-site对应于off-site,一般在IT外包中应用)的设施?你和云服务供应商之间的延迟会不会成为问题?你现在的基于云的键/值数据库支持它吗?如果你的键/值数据库有10亿个条目,可是每秒钟却只能提供1000条结果,这样的查询该执行多久才能完事呢?
归根结底,虽然规模是一项考虑因素,不要把它排在你将数据转换成为资产的能力的前头。如果你的用户,因为竞争对手拥有更酷更人性化的特性而跑掉,这世上的一切伸缩性都将一无是处。
云服务竞争者
一些网络服务供应商现在提供了基于即用即付的多租户键/值数据库。大部分都符合我们这里讨论到的标准,但是每一个都有其独特之处,与迄今描述的一般标准有所不同。现在让我们看看这些特定的数据库,分别是SimpleDB, Google AppEngine Datastore和SQL Data Services。
亚马逊: SimpleDB
SimpleDB 是一个亚马逊网络服务平台的一个面向属性的键/值数据库。SimpleDB仍处于公众测试阶段;当前,用户能在线注册其“免费”版 --免费的意思是说直到超出使用限制为止。
SimpleDB有几方面的限制。首先,一次查询最多只能执行5秒钟。其次,除了字符串类型,别无其它数据类型。一切都以字符串形式被存储、获取和比较,因此除非你把所有日期都转为ISO8601,否则日期比较将不起作用。第三,任何字符串长度都不能超过1024字节,这限制了你在一个属性中能存储的文本的大小(比如说产品描述等)。不过,由于该模式动态灵活,你可以通过追加“产品描述1”、“产品描述2”等来绕过这类限制。一个项目最多可以有 256个属性。由于处在测试阶段,SimpleDB的域不能大于10GB,整个库容量则不能超过1TB。
SimpleDB的一项关键特性是它使用一种最终一致性模型。这个一致性模型对并发性很有好处,但意味着在你改变了项目属性之后,那些改变有可能不能立即反映到随后的读操作上。尽管这种情况实际发生的几率很低,你也得有所考虑。比如说,在你的演出订票系统里,你不会想把最后一张音乐会门票卖给5个人,因为在售出时你的数据是不一致的。
Google AppEngine Data Store
Google AppEngine Datastore 是在BigTable之上建造出来的,是Google的内部存储系统,用于处理结构化数据。AppEngine Datastore其自身及其内部都不是直接访问BigTable的实现机制,可被视为BigTable之上的一个简单接口。
AppEngine Datastore所支持的项目的数据类型要比SimpleDB丰富得多,也包括了包含在一个项目内的数据集合的列表型。
如果你打算在Google AppEngine之内建造应用的话,几乎可以肯定要用到这个数据存储。然而,不像SimpleDB,使用谷歌网络服务平台之外的应用,你并不能并发地与AppEngine Datastore进行接口 (或通过BigTable)。
微软: SQL数据服务
SQL数据服务 是微软 Azure 网络服务平台的一部分。该SDS服务也是处于测试阶段,因此也是免费的,但对数据库大小有限制。 SQL数据服务其自身实际上是一项处在许多SQL服务器之上的应用,这些SQL服务器组成了SDS平台底层的数据存储。你不需要访问到它们,虽然底层的数据库可能是关系式的;SDS是一个键/值型仓储,正如我们迄今所讨论过的其它平台一样。
微软看起来不同于前三个供应商,因为虽然键/值存储对于可扩性而言非常棒,相对于RDBMS,在数据管理上却很困难。微软的方案似乎是入木三分,在实现可扩性和分布机制的同时,随着时间的推移,不断增加特性,在键/值存储和关系数据库平台的鸿沟之间搭起一座桥梁。
非云服务竞争者
在云之外,也有一些可以独立安装的键/值数据库软件产品。大部分都还很年轻,不是alpha版就是beta版,但大都是开源的;通过看看它的代码,比起在非开源供应商那里,你也许更能意识到潜在的问题和限制。
CouchDB
CouchDB 是一个免费、开源、面向文档的数据库。它来自于键/值存储,使用JSON(译者:JavaScript Object Notation,一种轻量级的数据交换格式)来定义项目的模式。CouchDB允许通过JavaScript动态创建“视图”,意在跨越面向文档型数据库与关系数据库之间的鸿沟。这些视图将文档数据映射在类似表的结构上,可被索引和查询。
现在,CouchDB 还不是真正的分布式数据库。它的复制功能允许数据在服务器间同步,但这并非建设高可扩性的环境所需的那种分布类型。毫无疑问,CouchDB团队将朝此目标继续努力。
Project Voldemort
Project Voldemort 是分布式的键/值数据库,旨在横向扩展于大量的服务器中。它产生自LinkedIn所完成的工作,据报告在那儿为几个有着极高可扩性要求的系统所使用。Project Voldemort也使用了Amazon的最终一致性模型。
Project Voldemort还很新;它的网站前几周才刚开张。
Mongo
Mongo是由Geir Magnusson和Dwight Merriman (提到DoubleClick你可能就想到他)在10gen开发出来的数据库系统。跟CouchDB一样,Mongo是一个面向文档的JSON数据库,除了它是被设计为一个真正的对象数据库,而不是一个纯粹的键/值存储这一点之外。起初,10gen关注于整合出一个完整的网络服务栈;然而最近,它已经把重点转移到Mongo数据库上了。其beta测试版计划在二月中发布。
Drizzle
Drizzle可被认为是键/值存储要解决的问题的反向方案。Drizzle诞生于MySQL(6.0)关系数据库的拆分。在过去几个月里,它的开发者已经移走了大量非核心的功能(包括视图、触发器、已编译语句、存储过程、查询缓冲、ACL以及一些数据类型),其目标是要建立一个更精简、更快的数据库系统。Drizzle 仍能存放关系数据;正如MySQL/Sun的Brian Aker所说那样:“没理由泼洗澡水时连孩子也倒掉”。它的目标就是,针对运行于16核(或以上)系统上的以网络和云为基础的应用,建立一个半关系型数据库平台。
决策
最终,有四条理由支持你为应用选择非关系式的键/值数据库平台:
1. 你的数据很大程度上是面向文档的,使得它比关系数据库更自然地适合于键/值数据模型。
2. 你的开发环境严重地面向对象时,键/值数据库能尽量减少对“管道”代码的需求。
3. 数据存储很廉价,易于集成进供应商的网络服务平台。
4. 你优先考虑的是随需应变的高端可扩性 -- 也就是说,那种通过简单的扩充所无法获得的大规模、分布式的可扩性。
但是在作决定的时候,要记得这种数据库的限制,以及从关系式大路出走时所面临的风险。
对于其他需求而言,你也许在RDBMS那里能得到最好的满足。因此,关系数据库的死期是不是到了?显然不是。嗯,至少还没有。
发表评论
-
Cassandra数据模型
2010-03-29 17:25 2074参考 http://www.cnblogs.com/ ... -
如何安装和配置Cassandra
2010-03-29 14:38 2846Cassandra属于最近比较流行的一款NoSQL数据库,ht ... -
开源键-值数据库笔记
2010-01-20 11:46 1365前段时间玩了Google App Engine之后一直对开源的 ... -
infobright: 基于mysql的数据仓库(data warehouse)
2010-01-20 11:21 2866前些天捧起hongqn拿给我 ... -
MongoDB入门简介
2010-01-20 11:21 4416有关于MongoDB的资料现在较少,且大多为英文网站,以上内容 ... -
MySQL引擎简介
2010-01-18 16:04 859MySQL是我们比较常用的 ... -
PreparedStatement的用法(转)
2009-11-30 16:44 1092jdbc(java database connectivity ... -
SQL常用语句一览
2009-10-15 14:59 2113SQL常用语句一览 (1)数据记录筛选: sql=&q ... -
SQL 连接 JOIN 例解。(左连接,右连接,全连接,内连接,交叉连接,自连接)
2009-10-15 14:51 1002最近公司在招人,同事 ... -
也许是被忽略的update语句
2009-09-11 13:35 1121呵呵,园里的兄弟我又来写简单的文章了,希望大家不吝赐教。这次要 ... -
update 子查询
2009-09-11 13:34 2107基础知识 1, 关联子查 ... -
利用带关联子查询Update语句更新数据
2009-09-11 13:33 2158Update是T-sql中再简单不过的语句了,update t ... -
数据库事务锁机制的分析
2009-09-11 13:24 1185锁是网络数据库中的一个非常重要的概念,它主要用于多用户环境下保 ... -
MySQL数据库锁机制的相关原理
2009-09-11 13:23 1678在MySQL中对于使用表级 ... -
Oracle数据库中的锁机制研究
2009-09-11 13:23 1044本文通过对Oracle数据库 ...
相关推荐
这篇文档虽然以“世界末日来临之前怎样200字”为主题,但实际上讨论的是面对未知的灾难或世界末日,人们的心态调整和生活态度的问题,而非真正的IT知识。不过,我们可以从文档中提炼出一些与生活哲学、心理学和社会...
数据库ER图,全称为实体关系图(Entity-Relationship Diagram),是数据库设计中用于表示实体及其关系的图形化工具。在数据库学中,它扮演着至关重要的角色,因为它可以帮助设计者清晰地描绘出数据模型,为数据库的...
【Ghost:末日来临 App将何去何从】 在当今数字化时代,智能手机和平板电脑的销量逐年攀升,尤其是在2021年,其销量首次超过传统台式机和笔记本电脑。这一现象的背后,移动应用(App)起到了至关重要的推动作用。...
《世界末日倒计时:Java GUI Swing应用详解》 在信息技术领域,编程语言和图形用户界面(GUI)...它不仅是一个技术实践,也是开发者创造力的体现,无论世界末日是否真的来临,这样的编程实践都能带来乐趣和学习价值。
C语言 末日方舟 修改器源码C语言 末日方舟 修改器源码C语言 末日方舟 修改器源码C语言 末日方舟 修改器源码C语言 末日方舟 修改器源码C语言 末日方舟 修改器源码C语言 末日方舟 修改器源码C语言 末日方舟 修改器源码...
传统的博客编辑工具已经无法满足专业人士在技术领域展现自己作品的需求,他们需要的是能够处理更为复杂数据和图形的专业工具。而“博客超排世界末日版”正是为了解决这一问题而诞生的一款革命性产品。 “博客超排...
MySQL是一个广泛使用的开源关系型数据库管理系统,具有高性能、稳定性强以及易于使用的特点。在本项目中,爬虫将抓取的数据直接存入MySQL数据库,这有助于数据的长期存储和后期的查询分析。使用数据库存储数据的好处...
总结起来,2016年的“小程序预示着App末日来临”这一事件,标志着移动互联网进入了一个新的阶段。小程序以其便捷性和高效性,改变了用户与应用的交互方式,推动了互联网服务的创新和商业模式的演进。尽管面临挑战,...
【《世界末日的梦魇与现实》阅读】草在世界末日在线阅读.docx
《百度2012世界末日js代码》 在2012年,网络上曾流行一个有趣的互动现象,那就是当用户在百度搜索框输入“2012世界末日”时,页面会呈现出地震的效果,仿佛真的将人们带入了一个末日场景。这一创意的实现,背后离不...
【标题】"末日2012远程控制.zip"是一个压缩包文件,通常包含一系列相关的文件或程序。从名称来看,这可能与2012年流行的一种远程控制软件或者恶意软件有关。在IT安全领域,远程控制软件既可以用于合法目的,如远程...
英语世界末日PPT课件.pptx
然而,本项目"末日虫潮"的源代码表明,开发者在创建这款游戏时没有使用任何引擎,而是直接基于Android原生的Java或Kotlin语言进行编程。这种做法虽然增加了开发难度,但也有助于更深入地理解Android系统的底层机制和...
【标题】"2012国培挂机末日版" 涉及的主要知识点是计算机挂机软件的使用和培训,以及可能关联到的2012年的一个特定版本。挂机软件通常指的是能够在无人值守的情况下运行,执行特定任务的程序。在IT领域,这类软件...
《2012 末日时钟》是一个针对初学者设计的编程实例,它采用Win32 API进行开发,展示了如何构建一个具有特定功能的桌面时钟应用。这个项目不仅是一个实用的小工具,也是一个深入理解Windows编程基础的好教材。下面...
标题“百度2012世界末日地震效果.rar”指的是一个包含有2012年“世界末日”主题的地震模拟特效的压缩文件。这个特效可能是由百度开发或发布,用于网页设计或者互动体验展示。它利用JavaScript(JS)语言来实现视觉上...
《2012世界末日压力测试系统》是一款专为模拟极端环境下的系统性能和稳定性而设计的专业测试工具。在2012年这个特殊的时间节点,它可能被用来检验各种IT系统在面临全球性灾难假设时的反应能力。压力测试是软件开发和...
本文将详细解析"百度2012世界末日地震效果"这一项目,带你深入了解如何利用JavaScript来模拟逼真的地震动态效果。 首先,让我们回顾一下标题和描述。"百度2012世界末日地震效果"指的是百度在2012年通过JavaScript...
《末日浩劫之歌》是一款基于Unity引擎开发的游戏,其源码包含了服务端和客户端的部分,这为我们提供了一个深入理解游戏开发流程和技术实现的宝贵机会。Unity是全球范围内广泛使用的跨平台游戏开发工具,特别在3D游戏...
2012年4月在百度搜索“2012世界末日”,一打开页面,页面震动了几下,像地震了一样,然后就裂开了,从远处飘过来一张拯救船票,踏上这艘船,您就可以躲过2012世界末日了,彩蛋效果源码同用了一个JS文件,内含使用...