`
徜徉の小溪
  • 浏览: 448040 次
  • 性别: Icon_minigender_1
  • 来自: 上海
社区版块
存档分类
最新评论

oracle分区表和分区索引

阅读更多

前一段听说CSDN.COM里面很多好东西,同事建议看看合适自己也可以写一写,呵呵,今天第一次开通博客,随便写点东西,就以第一印象分区表简单写第一个吧。

 

 

ORACLE对于分区表方式其实就是将表分段存储,一般普通表格是一个段存储,而分区表会分成多个段,所以查找数据过程都是先定位根据查询条件定位分区范围,即数据在那个分区或那几个内部,然后在分区内部去查找数据,一个分区一般保证四十多万条数据就比较正常了,但是分区表并非乱建立,而其维护性也相对较为复杂一点,而索引的创建也是有点讲究的,这些以下尽量阐述详细即可。

 

1、类型说明:

range分区方式,也算是最常用的分区方式,其通过某字段或几个字段的组合的值,从小到大,按照指定的范围说明进行分区,我们在INSERT数据的时候就会存储到指定的分区中。

List分区方式,一般是在range基础上做的二级分区较多,是一种列举方式进行分区,一般讲某些地区、状态或指定规则的编码等进行划分。

Hash分区方式,它没有固定的规则,由ORACLE管理,只需要将值INSERT进去,ORACLE会自动去根据一套HASH算法去划分分区,只需要告诉ORACLE要分几个区即可。

 

分区可以进行两两组合,ORACLE 11G以前两两组合都必须以range作为一级分区的开头,ORACLE目前最多支持2级别分区,但这个级别已经够我们使用了。

我这只以最简单的分区方式创建分区来说明问题,就拿range分区来说明问题吧(基本创建语句如下):

 

[sql] view plaincopy
 
  1. CREATE TABLE TABLE_PARTITION(  
  2.        COL1   NUMBER,  
  3.        COL2   VARCHAR2(10)  
  4. )  
  5. partition by range(COL1)(  
  6.           partition TAB_PARTOTION_01 values less than (450000),  
  7.           partition TAB_PARTOTION_02 values less than (900000),  
  8.           partition TAB_PARTOTION_03 values less than (1350000),  
  9.           partition TAB_PARTOTION_04 values less than (1800000),  
  10.           partition TAB_PARTOTION_OTHER values less THAN (MAXVALUE)  
  11. );  

 

 

这个分区表创建了四个定长分区,理想情况下,存储450000条数据,扩展分区是超过这个数额的分区,当发现扩展分区有数据的时候,可以进行将扩展分区做SPLIT操作,这个后面说明,这里先说一下一些常用的分区表查询功能,我们先插入一些数据进去。

 

[sql] view plaincopy
 
  1. INSERT INTO TABLE_PARTITION(COL1,COL2)  
  2. VALUES(1,'数据测试');  
  3. INSERT INTO TABLE_PARTITION(COL1,COL2)  
  4. VALUES(23,'数据测试');  
  5. INSERT INTO TABLE_PARTITION(COL1,COL2)  
  6. VALUES(449000,'数据测试');  
  7.    
  8. INSERT INTO TABLE_PARTITION(COL1,COL2)  
  9. VALUES(450000,'数据测试');  
  10.    
  11. INSERT INTO TABLE_PARTITION(COL1,COL2)  
  12. VALUES(1350000,'数据测试');  
  13.    
  14. INSERT INTO TABLE_PARTITION(COL1,COL2)  
  15. VALUES(900000,'数据测试');   
  16.    
  17. INSERT INTO TABLE_PARTITION(COL1,COL2)  
  18. VALUES(1800000-1,'数据测试');  
  19. COMMIT;  



 

为了检测哪些分区中有哪些数据分别按照分区去查询数据(应用开发中基本不会用到,因为不会把分区写死)

 

[sql] view plaincopy
 
  1. SQL> SELECT * FROM TABLE_PARTITION partition(TAB_PARTOTION_01);  
  2.       COL1     COL2  
  3. ---------- ---------------  
  4.          1     数据测试  
  5.         23     数据测试  
  6.     449000    数据测试  

 

说明第一个分区有:1、23、44900这些数据,也就是插入时,ORACLE是自己去找分区的,其实分区这种子表管理自己也可以通过程序去完成,ORACLE给你提供了一套,就可以自己去完成了。其余的数据就自己查了,都是一个道理。

 

2、分区应用:

一般一张表超过2G的大小,ORACLE是推荐使用分区表的,分区一般都需要创建索引,说到分区索引,就可以分为:全局索引、分区索引,即:global索引和local索引,前者为默认情况下在分区表上创建索引时的索引方式,并不对索引进行分区(索引也是表结构,索引大了也需要分区,关于索引以后专门写点)而全局索引可修饰为分区索引,但是和local索引有所区别,前者的分区方式完全按照自定义方式去创建,和表结构完全无关,所以对于分区表的全局索引有以下两幅网上常用的图解:

2.1、对于分区表的不分区索引(这个有点绕,不过就是表分区,但其索引不分区):

 分区表默认全局(不分区索引结构)

创建语法(直接创建即可):

CREATE INDEX <index_name> ON <partition_table_name>(<column_name>);

 

 

 

2.2、对于分区表的分区索引:

全局分区索引

创建语法为:

 

[sql] view plaincopy
 
  1. CREATE INDEX INX_TAB_PARTITION_COL1 ON TABLE_PARTITION(COL1)  
  2.   GLOBAL PARTITION BY RANGE(COL1)(  
  3.          PARTITION IDX_P1 values less than (1000000),  
  4.          PARTITION IDX_P2 values less than (2000000),  
  5.          PARTITION IDX_P3 values less than (MAXVALUE)  
  6.   );  

 

 

2.3、LOCAL索引结构:

 LOCAL分区索引

 

创建语法为:

 

[sql] view plaincopy
 
  1. CREATE INDEX INX_TAB_PARTITION_COL1 ON TABLE_PARTITION(COL1) LOCAL;  

 

也可按照分区表的的分区结构给与一一定义,索引的分区将得到重命名。

分区上的位图索引只能为LOCAL索引,不能为GLOBAL全局索引。

 

2.4、对比索引方式:

 

  一般使用LOCAL索引较为方便,而且维护代价较低,并且LOCAL索引是在分区的基础上去创建索引,类似于在一个子表内部去创建索引,这样开销主要是区分分区上,很规范的管理起来,在OLAP系统中应用很广泛;而相对的GLOBAL索引是全局类型的索引,根据实际情况可以调整分区的类别,而并非按照分区结构一一定义,相对维护代价较高一些,在OLTP环境用得相对较多,这里所谓OLTP和OLAP也是相对的,不是特殊的项目,没有绝对的划分概念,在应用过程中依据实际情况而定,来提高整体的运行性能。

 

3、常用视图:

 

[sql] view plaincopy
 
  1. 1、查询当前用户下有哪些是分区表:  
  2. SELECT * FROM USER_PART_TABLES;  
  3.    
  4. 2、查询当前用户下有哪些分区索引:  
  5. SELECT * FROM USER_PART_INDEXES;  
  6.    
  7. 3、查询当前用户下分区索引的分区信息:  
  8. SELECT * FROM USER_IND_PARTITIONS T  
  9. WHERE T.INDEX_NAME=?  
  10.    
  11. 4、查询当前用户下分区表的分区信息:  
  12. SELECT * FROM USER_TAB_PARTITIONS T  
  13. WHERE T.TABLE_NAME=?;  
  14.    
  15. 5、查询某分区下的数据量:  
  16. SELECT COUNT(*) FROM TABLE_PARTITION PARTITION(TAB_PARTOTION_01);  
  17.    
  18. 6、查询索引、表上在那些列上创建了分区:  
  19. SELECT * FROM USER_PART_KEY_COLUMNS;  
  20.    
  21. 7、查询某用户下二级分区的信息(只有创建了二级分区才有数据):  
  22. SELECT * FROM USER_TAB_SUBPARTITIONS;  

 

 

4、维护操作:

4.1、删除分区

    

[sql] view plaincopy
 
  1. ALTER TABLE TABLE_PARTITION DROP PARTITION TAB_PARTOTION_03;  
  2. 如果是全局索引,因为全局索引的分区结构和表可以不一致,若不一致的情况下,会导致整个全局索引失效,在删除分区的时候,语句修改为:  
  3. ALTER TABLE TABLE_PARTITION DROP PARTITION TAB_PARTOTION_03 UPDATE GLOBAL INDEXES  

 

 

4.2、分区合并(从中间删除掉一个分区,或者两个分区需要合并后减少分区数量)

    合并分区和删除中间的RANGE有点像,但是合并分区是不会删除数据的,对于LIST、HASH分区也是和RANGE分区不一样的,其语法为:

 

[sql] view plaincopy
 
  1. ALTER TABLE TABLE_PARTITION MERGE PARTITIONS    TAB_PARTOTION_01,TAB_PARTOTION_02 INTO PARTITION MERGED_PARTITION;  

 

 

 

4.3、分隔分区(一般分区从扩展分区从分隔) 

 

[sql] view plaincopy
 
  1. ALTER TABLE TABLE_PARTITION SPLIT PARTITION TAB_PARTOTION_OTHERE AT(2500000)   
  2. INTO (PARTITION TAB_PARTOTION_05,PARTITION TAB_PARTOTION_OTHERE);  

 

 

4.4、创建新的分区(分区数据若不能提供范围,则插入时会报错,需要增加分区来扩大范围)

一般有扩展分区的是都是用分隔的方式,若上述创建表时没有创建TAB_PARTOTION_OTHER分区时,在插入数据较大时(按照上述建立规则,超过1800000就应该创建新的分区来存储),就可以创建新的分区,如:

为了试验,我们将扩展分区先删除掉再创建新的分区(因为ORACLE要求,分区的数据不允许重叠,即按照分区字段同样的数据不能同时存储在不同的分区中):

 

[sql] view plaincopy
 
  1. ALTER TABLE TABLE_PARTITION DROP PARTITION TAB_PARTOTION_OTHER;  
  2. ALTER TABLE TABLE_PARTITION ADD PARTITION TAB_PARTOTION_06 VALUES LESS THAN(2500000);  

 

 

在分区下创建新的子分区大致如下(RANGE分区,若为LIST或HASH分区,将创建方式修改为对应的方式即可):

 

[sql] view plaincopy
 
  1. ALTER TABLE <table_name> MODIFY PARTITION <partition_name> ADD SUBPARTITION <user_define_subpartition_name> VALUES LESS THAN(....);  

 

 

4.5、修改分区名称(修改相关的属性信息)

 

[sql] view plaincopy
 
  1. ALTER TABLE TABLE_PARTITION RENAME PARTITION MERGED_PARTITION TO MERGED_PARTITION02;  

 

 

 

4.6、交换分区(快速交换数据,其实是交换段名称指针)

  首先创建一个交换表,和原表结构相同,如果有数据,必须符合所交换对应分区的条件:

  

[sql] view plaincopy
 
  1. CREATE TABLE TABLE_PARTITION_2  
  2.   AS SELECT * FROM TABLE_PARTITION WHERE 1=2;  

 

  然后将第一个分区的数据交换出去:

 

[sql] view plaincopy
 
  1. ALTER TABLE TABLE_PARTITION EXCHANGE PARTITION TAB_PARTOTION_01   
  2. WITH TABLE TABLE_PARTITION_2 INCLUDING INDEXES;  

 

  此时会发现第一个分区的数据和表TABLE_PARTITION_2做了瞬间交换,比TRUNCATE还要快,因为这个过程没有进行数据转存,只是段名称的修改过程,和实际的数据量没有关系。

 

  如果是子分区也可以与外部的表进行交换,只需要将关键字修改为:SUBPARTITION 即可。

 

4.7、清空分区数据

 

   

[sql] view plaincopy
 
  1. ALTER TABLE <table_name> TRUNCATE PARTITION <partition_name>;  
  2.    ALTER TABLE <table_name> TRUNCATE subpartition <subpartition_name>;  

 

 

9、磁盘碎片压缩

   对分区表的某分区进行磁盘压缩,当对分区内部数据进行了大量的UPDATE、DELETE操作后,一定时间需要进行磁盘压缩,否则在查询时,若通过FULL SCAN扫描数据,将会把空块也会扫描到,对表进行磁盘压缩需要进行行迁移操作,所以首先需要操作:

 

[sql] view plaincopy
 
  1. ALTER TABLE <table_name> ENABLE ROW MOVEMENT ;  
  2.    
  3.     对分区表的某分区压缩语法为:  
  4. ALTER TABLE <table_name>  
  5. modify partition <partition_name> shrink space;  
  6.    对普通表压缩:  
  7. ALTER TABLE <table_name> shrink space;  
  8.   对于索引也需要进行压缩,索引也是表:  
  9. ALTER INDEX <index_name> shrink space;  

 

 

 

10、分区表重新分析以及索引重新分析

  对表进行压缩后,需要对表和索引进行重新分析,对表进行重新分析,一般有两种方式:

  在ORACLE 10G以前,使用:

 

[sql] view plaincopy
 
  1. BEGIN  
  2.    dbms_stats.gather_table_stats(USER,UPPER('<table_name>'));  
  3. END;  
  4.   
  5. ORACLE 10G后,可以使用:  
  6. ANALYZE TABLE <table_name> COMPUTE STATISTICS;  

 

 

  索引重新分析,将上述两种方式分别修改一下,如第一种可以使用:gather_index_stats,而第二种修改为:ANALYZE INDEX即可,不过一般比较常用的是重新编译:

  对于分区表并进行了索引分区的情况,需要对每个分区的索引进行重新编译,这里以LOCAL索引为例子(其每个索引的分区和表分区结构相同,默认分区名称和表分区名称相同):

 

[sql] view plaincopy
 
  1. ALTER INDEX <index_name> REBUILD PARTITION <partition_name>;  
  2.  对于全局索引,根据全局索引锁定义的分区名称修改即可,若没有分区,和普通单表索引重新编译方式相同:  
  3. ALTER INDEX <index_name> REBUILD;  

 

 

11、关联对象重新编译

  上述对表、索引进行重新编译,尤其对表进行了压缩后会产生行迁移,这个过程可能会导致一些视图、过程对象的失效,此时要将其重新编译一次。

 

 

12、扩展:HASH分区中,如果创建了新的分区,可以将其进行重新HASH分布:

 

[sql] view plaincopy
 
  1. ALTER TABLE <table_name> COALESCA PARTITION  

 

 

 

5、回归总结:何时建分区,分区类别,索引,如何对应SQL

 

1、创建时机

 

     上述已经说明,2G以上的表,ORACLE推荐创建分区。

     分区的方式根据实际情况而定,才能提高整体性能。

     分区的字段一定要是经常用以提取数据的字段,否则会在提取过程中导致遍历多个分区,这样比没有分区还要慢。

     分区字段要选择合适,数据较为均匀分布到各个分区,不要太多也不要太少,而且根据分区字段可以很快定位到分区范围。

     一般情况下,尽量然业务操作在同一个分区内部完成。

 

 

2、分区类别

 

    分区主要有RANGE、LIST、HASH;

     RANGE通过值的范围分区,也是最常用的分区,这种分区注意在一种变长数字字符串中,很多人会导致认为是数字类型,而按照数字区分区,这样会分布十分不均匀的现象发生。

     LIST是列举方式进行分区,一般作为二级分区而存在(当然也可以自己分区,ORACLE 11G后在分区上也可以作为主分区而存在),在RANGE基础上,若数据需要继续分区,并且在RANGE基础上数据量较为固定,只是较大,可以按照一定规则进一步分区。

     HASH只指定分区个数,分区细节由ORACLE完成,增加HASH分区可以重新分布数据。

 

     注意:分区字段不能使用函数转换后在分区,如,将某数字字符串字段,先TO_NUMER(COL_NAME)后分区。

 

3、索引类别

    大致分:GLOBAL索引和LOCAL索引,钱和可以分:GLOBAL不分区索引,和GLOBAL分区索引。

 

     GLOBAL不分区索引一般不太推荐,因为是用一颗大的索引树来映射一个表,这个过程,这样速度不见得比不分区快。

     GLOBAL分区索引,查找数据若通过要通过索引,是先定位了索引内部的分区,然后在这个分区索引中找到ROWID,然后回表提取数据。

     LOCAL索引是和分区的个数逐个对应的,可以说先定位分区表的分区也可以说先定位索引的分区,因为他们是一一对应的,找到对应分区后,分区内部索引数据集合。

 

4、对应应用

     分区表、索引、分区索引,要利用其性能优势,最基本就是要提取数据时,要通过它首先将数据的范围缩小到一个即使做全盘扫描也不会太慢的情况。

      所以SQL一定要有分区上的这个字段的一个WHERE条件,将数据迅速定位到分区内部,而且尽量定位到一个分区里面(这个和创建分区的规则有关系)。

      建立分区本身不提要性能,要用好才可提高性能,在必要的RAC集群中,若存在多分区提取数据,适当采用并行提取可以提高提取的速度。

      对于索引部分,这里也只提到分区索引的创建方式以及常见索引的维护方式,对于索引原理理解后会更容易认识到提取数据时的技巧。

分享到:
评论

相关推荐

    Oracle分区表和分区索引在VLDB中的研究.pdf

    "Oracle分区表和分区索引在VLDB中的研究" 本文研究了Oracle分区表和分区索引在VLDB(Very Large Databases)中的应用。分区表和分区索引是数据库管理中的关键技术之一,是VLDB中一个重要的性能提升机制。通过分析一...

    深入学习分区表及分区索引(详解oracle分区).docx

    以下是对Oracle分区表和分区索引的深入解析: 1. **何时使用分区**: - 当表的数据量超过2GB时,分区有助于避免32位操作系统下的文件大小限制,同时减少大规模数据的备份时间。 - 对于包含历史数据的表,如按月份...

    Oracle分区表及分区索引

    分区索引是指在分区表上创建的索引,分区索引可以提高查询性能,例如,全局索引和分区索引。 全局索引(Global Index) 全局索引是指在分区表上创建的索引,索引包含所有的分区数据,例如: CREATE INDEX idx_...

    oracle分区表分区索引.docx

    Oracle 分区表分区索引是 Oracle 数据库中的一种重要机制,它可以提高数据的存储和查询效率。下面将详细介绍 Oracle 分区表分区索引的类型、分类、创建方法和维护方式。 一、分区表和分区索引的概念 分区表是指将...

    Oracle 分区表 分区索引

    ### Oracle 分区表与分区索引详解 #### 一、Oracle分区概述 在Oracle数据库中,分区技术是一种非常有效的管理大型表和索引的方法。通过将一个大的表或索引分成多个较小的部分(分区),可以显著提高查询性能,并...

    Oracle 分区表 分区索引 索引分区详解

    虽然存储介质和数据处理技术的发展也很快,但是仍然不能满足用户的需求,为了使用户的大量的数据在读写操作和查询中速度更快,Oracle提供了对表和索引进行分区的技术,以改善大型应用系统的性能。

    Oracle分区表培训

    Oracle分区表是数据库管理系统Oracle中的一个高级特性,用于将大表分成较小、更易管理的部分,从而提高查询性能,优化存储管理和数据维护。在大型企业级应用中,尤其是在处理大量数据时,分区表是不可或缺的技术手段...

    Oracle分区表详解

    ### Oracle 分区表详解 #### 一、Oracle 分区简介 Oracle 的分区技术是一种用于管理和优化超大型表和索引的有效手段。通过将一个大型的表或者索引分割成多个较小且可管理的部分,分区技术能够显著提升数据库的性能...

    分区索引,本地索引,全局索引的区别

    在Oracle数据库中,分区索引是针对分区表的一种特殊索引类型,它可以显著提高对于大规模数据集的查询性能。根据索引是否与表的分区策略相匹配,分区索引可以分为两大类:本地索引(Local Index)和全局索引(Global ...

    Oracle分区表和锁的应用

    下面我们将深入探讨Oracle分区表和锁的应用。 一、Oracle分区表 1. **分区概念**:Oracle分区表是将一个大表逻辑上划分为多个较小的部分,每个部分称为一个分区。每个分区都有自己的索引和维护操作,这使得对大...

    oracle普通表转化为分区表的方法

    Oracle数据库中的分区表是一种高级的表组织形式,它将大表分成多个较小的部分,每个部分称为一个分区,以提高查询性能和管理效率。当表的大小超过2GB时,官方推荐使用分区表,因为它们在处理大量数据时具有显著优势...

    导入导出 Oracle 分区表数据

    ### 导入导出Oracle分区表数据 #### 一、概述 在Oracle数据库管理中,对分区表进行数据的导入与导出是一项常见的任务。...希望本文能够帮助读者更好地理解和掌握Oracle分区表数据的导入导出技术。

    Oracle 分区表自动维护脚本

    整体来看,Oracle分区表自动维护脚本通过利用数据库的调度机制和自动化执行一系列维护任务,有助于确保数据库表的数据分区得到及时和正确的维护管理。对于大型的OLTP和数据仓库系统,这种自动化脚本可以显著减轻...

    ORACLE分区与索引

    针对分区表,Oracle 提供了分区索引,它允许索引与分区策略相结合。例如,可以创建局部索引,每个分区都有自己的索引,或者创建全局索引,覆盖所有分区。局部索引通常在查询性能上有优势,而全局索引则适用于跨分区...

    Oracle分区表和索引

    Oracle分区表和索引是一种高效的数据管理策略,尤其适用于处理大数据量和包含历史数据的表。当表的大小超过2GB,特别是在32位操作系统上,分区能够有效地提高查询性能,减少备份时间,并且便于管理和维护。Oracle...

    清除oracle分区表数据

    根据给定的信息“清除oracle分区表数据”,我们将深入探讨如何有效地进行这项操作。 ### 分区表简介 分区是将一个大的表或索引物理地分成多个更小的部分的过程。每个部分(分区)都作为一个独立的对象来处理,这样...

    oracle索引与分区索引介绍

    Oracle 索引与分区索引是 Oracle 数据库中两个重要的概念,它们都是为了提高查询性能和数据存储效率而设计的。在本文中,我们将详细介绍 Oracle 索引与分区索引的概念、特点、分类、创建方法、维护操作等方面的知识...

Global site tag (gtag.js) - Google Analytics