一.水平分割
什么是水平分割?打个比较形象的比喻,在食堂吃饭的时候,只有一个窗口,排队打饭的队伍太 长了,都排成S型了,这时容易让排队的人产生焦虑情绪,容易产生混乱,这时一个管理者站出来,增加多个打饭窗口,把那条长长的队伍拦腰截断成几队。更形象 一点的理解,你拿一把“手术刀”,把一个大表猛的切了几刀,结果这个大表,变成了几个小表.
水平分割根据某些条件将数据放到两个或 多个独立的表中。即按记录进分分割,不同的记录可以分开保存,每个子表的列数相同。水平切割将表分为多个表。每个表包含的列数相同,但是数据行更少。例 如,可以将一个包含十亿行的表水平分区成 12 个表,每个小表表示特定年份内一个月的数据。任何需要特定月份数据的查询只需引用相应月份的表。
通常用来水平分割表的条件有:日期时间维度、地区维度等,当然还有更多的业务维度。下面我举几个例子来解说一下
案例1:某个公司销售记录数据量太大了,我们可以对它按月进行水平分割,每个月的销售记录单独成一张表。
案例2:某个集团在各个地区都有分公司,该集团的订单数据表太大了,我们可以按分公司所在的地区进行水平切割。
案例3:某电信公司的话单按日期、地市水平切割后,发现数据量太大,然后他们又按品牌、号码段进行水平切割
水平分割通常在下面的情况下使用:
(1)表数据量很大,分割后可以降低在查询时需要读的数据和索引的页数,同时也降低了索引的层数,加快了查询速度。
(2)表中的数据本来就有独立性,例如表中分别记录各个地区的数据或不同时期的数据,特别是有些数据常用,而另外一些数据不常用。
(3)需要把数据存放到多个介质上。
(4)需要把历史数据和当前的数据拆分开。
优点:
1:降低在查询时需要读的数据和索引的页数,同时也降低了索引的层数,加快了查询速度。
缺点:
1:水平分割会给应用增加复杂度,它通常在查询时需要多个表名,查询所有数据需要union操作。在许多数据库应用中,这种复杂性会超过它带来的优点,因为只要索引关键字不大,则在索引用于查询时,表中增加两到三倍数据量,查询时也就增加读一个索引层的磁盘次数。
二.垂直分割
什么是垂直分割呢?打个形象的比喻,一个小公司通过短短几年发展变成了一个跨国大企业,以前的部门架构明显不能满足现在的业务发展,CEO噼里啪啦的把 公司分成了财务部、人事部、生产部、销售部门.....,一下子成立了多个部门,各司其职。这个还算比较形象吧,有木有?呵呵
你垂直分割表(不破坏第三范式),把主码(主键)和一些列放到一个表,然后把主码(主键)和另外的一些列放到另一个表中。将原始表分成多个只包含较少列的表。如果一个表中某些列常用,而另外一些列不常用,则可以采用垂直分割。
优点:
1:垂直分割可以使得行数据变小,一个数据块(Block)就能存放更多的数据,在查询时就会减少I/O次数(每次查询时读取的Block 就少)。
2:垂直分割表可以达到最大化利用Cache的目的。
缺点:
1:表垂直分割后,主码(主键)出现冗余,需要管理冗余列
2:会引起表连接JOIN操作(增加CPU开销)需要从业务上规避
三. 库表散列
表散列与水平分割相似,但没有水平分割那样的明显分割界限,采用Hash算法把数据分散到各个分表中, 这样IO更加均衡。一般来说,我们会按照业务或者功能模块将数据库进行分离,不同的模块对应不同的数据库或者表,再按照一定的策略对某个页面或者功能进行 更小的数据库散列,比如用户表,按照用户ID进行表散列,散列128张表,则应就能够低成本的提升系统的性能并且有很好的扩展性
- 浏览: 1683192 次
- 性别:
- 来自: 北京
文章分类
- 全部博客 (1323)
- easyui学习 (21)
- jquery (51)
- css (21)
- js (103)
- html (19)
- java (95)
- 测试工具 (7)
- oracle (45)
- eclipse (9)
- spring (8)
- 开源框架 (111)
- struts (12)
- hsqlbd (2)
- h2database (2)
- maven (8)
- activiti (2)
- sql语句 (7)
- fmpp (1)
- apache (2)
- tomcat (6)
- jbpm (2)
- ant (20)
- mysql (10)
- 业务需求 (54)
- ralasafe (3)
- Quartz (4)
- mybatis (8)
- flex (6)
- html5 (16)
- apache工具 (4)
- hibernate (5)
- linux (109)
- powerdesigner (3)
- 报表 (1)
- log4j (2)
- junit (1)
- shiro (4)
- wap (3)
- php (28)
- mantis (1)
- poi (3)
- extjs (1)
- 安防 (34)
- 网络 (113)
- UltraEdit (1)
- 手机 (9)
- freemarker (19)
- jquery mobile (28)
- css3 (1)
- 微信 (9)
- nodejs (7)
- 项目管理 (14)
- 文档 (13)
- ibatis (22)
- ftp (3)
- spring MVC (9)
- groovy (2)
- AngularJS (19)
- nginx (15)
- 会计 (5)
- hive (1)
- 分布式 (8)
- 设计模式 (4)
- velocity (2)
- 爬虫 (2)
- git (1)
- thymeleaf (4)
- activemq (5)
- bootstrap (1)
- Spring Batch (1)
- memcache (20)
- ttserver (1)
- Jenkins (1)
- cxf (1)
- axure (2)
- 银行金融 (11)
- c语言 (2)
- 大数据 (4)
- drools (4)
- python (2)
- 交易所 (1)
- haproxy (1)
- dubbo (3)
- dos (3)
- 人力资源 (4)
- 支付 (1)
- Intellij IDEA (1)
- IPO (1)
- springboot (1)
- 质量管理 (7)
- svn (1)
- 其他 (8)
- 阿里云 (2)
- 多媒体设计 (2)
- 数据库 (4)
- wps (0)
最新评论
-
masuweng:
en
Native.js -
rmnjava:
我按照你的方法写的,不起作用啊
easyui验证的删除和恢复 -
rmnjava:
原地址打不开了呀
easyui验证的删除和恢复 -
sunteng:
sunteng 写道这是json 吗[{url:'aaa'}, ...
freemarker解析json数组 -
sunteng:
这是json 吗
freemarker解析json数组
发表评论
-
ORA-14400: 插入的分区关键字未映射到任何分区
2020-01-02 10:53 903解决方式将原有的range转换为intervalALTER T ... -
表分区的优缺点
2018-06-15 14:04 952当表中的数据量不断增大,查询数据的速度就会变慢,应用程序的 ... -
pl/sql编程简绍
2018-06-15 13:31 425简绍pl/sql编程的 https://www.cnbl ... -
linux oracle用户数据使用数据泵导出和导入
2017-03-29 12:43 881--切换用户su - oracle--连接oracle用户or ... -
linuxoracle用户数据导出和导入
2017-03-12 14:50 694需要新创建一个kanbandev开发账户,而把kanban ... -
oracle synonym同义词
2017-01-20 17:40 3741.创建同义词语句: create public s ... -
sql排序null在最后
2017-01-03 19:18 563sql排序null在最后 SELECT * F ... -
oracle完全卸载
2016-11-09 10:36 385oracle完全卸载 ---window7和window10 ... -
维护数据库SQL总结
2016-10-24 14:28 435查找所有的超级用户 SELECT * FROM v$pwf ... -
Oracle中nls_sort和nlssort()函数排序功能
2016-09-01 13:35 621ALTER SESSION SET NLS_SORT=''; ... -
删除流程存储过程
2016-07-14 16:00 570删除存储过程 -
写的存储过程
2016-07-11 16:55 481写的存储过程 create or replace proc ... -
Oracle的KILL锁表及清除session方法
2016-03-31 20:05 591一、处理过程 1.通过查找出已被锁定的数据库表 ... -
Oracle表空间和数据文件
2016-03-25 16:24 359Oracle的逻辑结构由数据块、区、段、表空间四部分组成 ... -
Oracle数据库连接共享/专用模式
2016-03-25 14:20 1138专用服务器模式 Oracle ... -
SQL*Plus管理工具
2016-03-25 13:36 558SQL*Plus是Oracle公司推出的一个交互式管理工具 ... -
Oracle网络管理
2016-03-25 13:36 534Oracle Net是Oracle的网络组件,它能够建立客 ... -
ORACLE OFA原则
2016-03-25 13:34 520最优灵活体系结构(Op ... -
ASM
2016-03-23 16:44 365//查询那些数据使用ASM实例SELECT INSTANCE_ ... -
Window下卸载Oracle的步骤
2016-03-23 16:20 436卸载Oracle的步骤 用DBCA删除数据库 停止O ...
相关推荐
树形控件以层次结构展示数据库中的库和表,提供清晰的视图。列表控件用于显示表格的详细信息和查询结果。在系统运行前,通过用户登录验证确保安全,只有权限相符的用户才能访问相应的数据。 【专业指导与参考文献】...
ORACLE数据库锁表问题浅析 Oracle数据库锁机制是企业级数据库管理系统中一个非常重要的机制。锁机制的主要目的是为了保证数据的一致性和正确性,在多用户同时访问数据库时,避免数据的不一致和错误。Oracle数据库锁...
STUN和TURN技术浅析
### 浅析Linux下的/etc/profile、/etc/bashrc、~/.bash_profile、~/.bashrc 在Linux系统中,为了方便管理和配置用户的Shell环境,系统提供了多种不同的配置文件。这些配置文件按照一定的规则来确定何时加载及加载...
腾讯大讲堂42-数据库内核设计思路浅析
ORACLE数据库完整性约束浅析.pdf
医院oracle数据库系统维护工作浅析
【基于Web的数据库技术浅析】 随着互联网技术的迅速发展,Web数据库已经成为处理和存储数据的核心技术。在本文中,作者聂晶探讨了基于Web的数据库技术,特别是B/S(Browser/Server)模式,它是数据库技术与Web技术...
大数据开发培训数据库三大范式浅析.doc
Redis 架构下的 MySQL 数据库性能提升浅析 I. Redis 架构简介 Redis 是一个基于 key-value 的高速缓存系统,具有性能高、数据类型丰富、复杂度低以及优化部分 bug 的优点。在互联网时代,快速开发是一个不变的需求...
【腾讯大讲堂数据库内核设计思路浅析学习教案】主要涵盖了数据库内核的基本结构、工作原理以及系统实现的关键技术。以下是对这些知识点的详细阐述: 1. **数据库内核结构**: - 数据库系统通常由多个组件构成,...
高校教务管理系统oracle数据库备份与恢复浅析.pdf
:计算机技术水平的提升,在较大程度上完善了计算机数据库管理系统,扩大了计算机数据库管理系统的应用范围。 特别是进入大数据时代后,每时每刻计算机网络都会产生庞大的信息量,信息整理检索的繁琐程度不断增大。...
本文旨在浅析在数据库管理系统中,如何有效进行大批量数据处理的优化技术。 首先,SQL(结构化查询语言)作为数据库管理系统的基础,是处理和查询数据库数据的主要手段。SQL的基本命令可以实现数据的增删改查,从而...
【腾讯大讲堂数据库内核设计思路浅析】 在深入探讨数据库内核设计思路之前,首先需要理解数据库体系结构的基本组成。一个典型的数据库系统通常包括以下几个关键组件: 1. **服务器核心系统**:这是数据库的核心...
ASP.NET是微软开发的一种用于构建动态网站、web应用和web服务的框架。在涉及网络数据库安全性的...通过阅读"ASP.NET网络数据库安全性浅析.pdf"这样的资料,可以进一步了解并掌握这些关键技术点,从而提升应用的安全性。
垂直分割涉及将常用属性和不常用属性分别存储,水平分割则可针对不同查询需求划分数据。这种做法可以减少查询时需要处理的数据量,提高性能。 3. 物理结构设计 物理结构设计的目的是合理安排数据在物理设备上的存储...
数据库查询优化浅析,数据库详细解说,图解