`
rq2_79
  • 浏览: 240315 次
  • 性别: Icon_minigender_1
  • 来自: 上海
社区版块
存档分类
最新评论

Reorg rebuild 重建表和表上的索引

阅读更多

 回收索引页上分配而未用的空间,删除前推行,或者根据所建聚簇索引(如果存在)重新将表中所有数据行写入新的页,使索引页的物理存放尽可能的连续,提高其访问效率。  
   
    例如,长期的表数据更新操作,使得包含索引数据的索引页的物理存放空间出现碎片,如同表的数据页空间碎片整理一样,可以通过该命令重建表上的索引,整理碎片,提高空间的存放和访问效率。  
   
  基本语法:  
   
  reorg   rebuild   table_name   [index_name]  
   
  例一,重建表tb1及其之上的所有索引:  
   
  1>   reorg   rebuild   tb1  
  2>   go  
  Beginning   REORG   REBUILD   of   'tb1'.  
  There   are   approximately   1   pages   to   be   processed.  
  Non-clustered   index   (index   id   =   2)   is   being   rebuilt.  
  REORG   REBUILD   of   'tb1'   completed.  
   
  例二,重建表tb1上的索引tb1_ind:  
   
  1>   reorg   rebuild   tb1   tb1_ind  
  2>   go  
  There   are   approximately   1   pages   to   be   processed.  
   
  注意:  
   
  重建索引的表的加锁模式只能是数据页锁(datapages)或数据行锁(datarows),不能是全部页锁(allpages),否则报错:    
  1>   reorg   rebuild   tb1  
  2>   go  
  Msg   11903,   Level   16,   State   3:  
  Line   1:  
  You   cannot   run   REORG   on   a   table   which   uses   allpages   locking.    
  重建表上的所有索引,包括可能有的聚簇索引和所有非聚簇索引,或指定某一个具体名字的索引。    
  重建索引之前,必须将表对应数据库的选项设置为“select   into/bulkcopy/pllsort”。    
  重建索引需要额外的磁盘空间,大小等于表和索引空间之和,可以通过系统存储过程   sp_spaceused   table_name[index_name]   查看实际占用空间。    
  重建索引以后,在转储数据库事务日志之前,应该转储数据库。    
  不能在事务内运行reorg命令。    
  不能在文本索引中运行reorg命令,因为在sysindexes中的名字与文本链关联。    
  Reorg   build的应用前提:  
   
  查询并没有象通常一样选择使用大I/O池,而且optdiag显示出数据页、数据行或索引页的聚簇比很低。    
 使用sp_chgattribute改变了exp_row_size、reserverpagegap或fillfactor空间管理设置中的一项或多项,并想让所有的改变不仅应用于未来数据,还要应用于已有的行和页。

 

Sybase数据库的碎片整理    
  对于像Sybase这样的大型DBMS系统而言,作为OLTP(联机事务处理)应用的基石,它需要能每天24小时,每年365天不间断运行。由于其应用程 序每天对数据库进行大量的插入、更新、删除等操作,在数据库的物理存储介质上产生了大量存储碎片,从而影响了存储的效率以及数据库应用运行的速度。是否可 以像Windows操作系统的“碎片整理”程序一样,整理这些碎片,从而优化数据库存储,提高数据库的运行速度呢?答案是肯定的。本文将介绍Sybase 数据库的碎片类型以及碎片整理方法。    
  碎片类型    
  由于Sybase是通过OAM页、分配单元和扩展页来管理数据的,所以对OLTP应用的Database   Server会十分频繁地进行数据删除、插入和更新等操作,时间一长就会出现以下几种情况:    
  1.   页碎片    
  即本来可以存放在一个页上的数据却分散地存储在多个页上。如果这些页存储在不同的扩展单元上,Database   Server就要访问多个扩展单元,因此降低了系统性能。    
  2.   扩展单元碎片    
  在堆表中,当删除数据链中间的记录行时,会出现空页。随着空页的累积,扩展单元的利用率也会下降,从而出现扩展单元碎片。带cluster   index的table也有可能出现扩展单元碎片。    
  当有扩展单元碎片存在,会出现以下问题:    
  ●   对表进行处理时,常常出现死锁;    
  ●   利用较大的I/O操作或增加I/O缓冲区的大小也无法改变较慢的I/O速度;    
  ●   行操作的争用。    
  3.   扩展单元遍历    
  带有cluster   index的table会由于插入记录而导致页分裂,但当删除记录后,页会获得释放,从而形成跨几个扩展单元和分配单元的数据,而要访问该数据就必须遍历 几个扩展单元和分配单元。这将导致访问/查询记录的时间大大延长,开始时数据库的性能虽然较高,但使用一段时间后性能就会下降等问题。    
  实际上,数据在存储空间上排列得越紧密有序,Database   Server访问的速度就越快,消除碎片有助于提高系统的性能和更有效地利用数据存储空间。    
  碎片优化方法    
  处理碎片有多种方法,如重新定义table的填充因子,根据table的定义删除并重新创建索引、重建表等。    
  本文给出的方法是通过BCP实用程序将用户数据库的数据以文本形式导出,然后将用户数据库彻底清空、截断,再将文本数据导入到数据库,从而达到消除碎片的目的,具有通用性。    
  下面以Sun   Solaris   7操作系统下的Sybase   Adaptive   Server   Enterprise   11.5为例,说明整理数据库数据的具体方法。    
  1.   备份数据库    
  为防止在数据库碎片整理过程中出现不可预见的问题,有必要先备份数据库。    
  2.   创建bcp   out脚本并导出数据    
  ●   创建包含下列SQL语句的文件:    
  cre_bcp_out.sql    
  select   “bcp”   +   name   +   “out   ./”   +   name   +   “_out.txt   -Udboname   -Pdbopwd   -Ssys_name   -c”    
  from   sysobjects   where   type   =   ‘U’    
  order   by   name    
  go    
  ●   isql   -Udboname   -Pdbopwd   -Ssystemname   <   cre_bcp_out.   sql   >   b_out    
  ●   编辑输出文件,去掉文件第一行和最后两行无关的字符:vi   b_out    
  ●   执行脚本,将数据库的数据导出到文本文件:sh   b_out    
  3.   创建truncate   table脚本并截断数据库    
  ●   创建包含下列SQL语句的文件:    
  cre_trunc_out.sql    
  select   “truncate   table”   +   name   from   sysobjects   where   type   =   ‘U’    
  order   by   name    
  go    
  ●   isql   -Udboname   -Pdbopwd   -Ssystemname   <   cre_   trunc_out.   sql   >   trunc_out.   sql    
  ●   编辑输出文件,去掉文件第一行和最后两行无关的字符,并在最后一行加入   go构成完整的SQL语句:vi   trunc_out    
  ●   执行以下语句,清空数据库的数据:    
  isql   -Udboname   -Pdbopwd   <   trunc_out.   sql    
  4.   创建bcp   in脚本并导入数据    
  ●   创建包含下列SQL语句的文件:    
  cre_bcp_in.   sql    
  select   “bcp”   +   name   +   “in   ./”   +   name   +   “_out.txt   -Udboname   -Pdbopwd   -Ssys_name   -c”from   sysobjects   where   type   =   ‘U’    
  order   by   name    
  go    
  ●   isql   -Udboname   -Pdbopwd   -Ssystemname   <   cre_   bcp_in.   sql   >   b_in    
  ●   编辑输出文件,去掉文件第一行和最后两行无关的字符:vi   b_in    
  ●   从文本中导入数据:sh   b_in    
  5.   更新数据库状态    
  Sybase不自动维护索引的统计信息,当用truncate   table截断数据库时,索引并没有改变,所以必须用update   statistics来确保索引的统计信息对应当前表数据的统计。    
  ●   创建包含下列SQL语句的文件:    
  cre_upd_st.   sql    
  select   “update   statistics”   +   name   from   sysobjects   where   type   =   “U”   order   by   name    
  go    
  ●   isql   -Udboname   -Pdbopasswd   -Ssystemname   <   cre_upd_st.   sql   >   upd_st.   sql    
  ●   编辑输出文件,去掉文件第一行和最后两行无关的字符,在最后一行加入   go构成完整的SQL语句:    
  vi   upd_st.   sql    
  ●   更新数据库状态:    
  isql   -Udboname   -Pdbopasswd   -Ssystemname   <   upd_st.   sql    
 至此,基本上完成了数据库用户表的碎片整理工作。    
  小   结    
  在整理过程中,有以下两点需要注意:    
  1.   Tempdb的大小    
  当Sybase执行bcp   in脚本时,会占用导入数据2倍的tempdb空间,因此在执行前要仔细估计最大的table的大小,保证有足够的tempdb空间。当空间不够时,要考 虑用分割table或删除陈旧数据的方法缩小table的大小,或者考虑增加tempdb的大小。    
  2.   数据库配置选项的设置    
  当数据库执行bcp   in脚本时会产生大量的log,为保证bcp   in进程不致因为log溢出而中断,应该设置database的选项“truncate   log   on   chkpt”为“true”。    
  虽然Sybase数据库是自优化的,但只要数据库是动态的,数据库碎片现象就会存在。在OLTP应用的场合,随着数据的不断增大,系统变得越来越缓慢,并且经常出现死锁时,应该检查数据库的碎片,并且采用以上方法进行优化。    
  实际上,应该定期做数据库的碎片整理,保证数据库的物理存储经常处于

分享到:
评论

相关推荐

    完整的REORG表的过程

    db2 V9.1 引入了自动重组功能,可以对表和索引进行自动重组。自动重组通过使用 REORGCHK 公式来确定何时需要对表进行重组。它会定期评估已经更新了统计信息的表,以便了解是否需要重组。 注意事项 在执行 REORGCHK...

    DB2如何评估索引碎片是否是缓慢的RUNSTATS根

    RUNSTATS是DB2中用于收集表和索引统计数据的命令。统计数据对于查询优化器来说至关重要,因为优化器会根据这些统计数据来决定执行查询的最有效路径。RUNSTATS命令的性能对数据库维护周期的效率有直接影响,因此,当...

    pg_reorg:PostgreSQL在线表聚类工具-开源

    pg_reorg可以在不保留任何锁的情况下重新组织PostgreSQL数据库上的表,以便您可以检索或更新正在重新组织的表中的行。 开发此模块是为了更好地替代CLUSTER和VACUUM FULL。 ------- pg_reorg位于pgfoundry,但是已经...

    分析Sybase的数据空间占用为何如此之大

    这个命令可以整理数据库中的页和索引,减少碎片,从而释放被浪费的空间。类似于Windows的碎片整理,它可以帮助重新排列数据以提高存储效率。 **解决方法二**:通过执行`sp_spaceused`系统存储过程,可以检查特定表...

    DB2性能调优资料,解决SQL执行慢的问题

    通过分析表的统计信息,REORGCHK可以判断表的碎片程度和空间利用率,如果达到一定的阈值,它会建议运行REORG。这样可以避免不必要的资源消耗,只在真正需要时进行重构。 3. **RUNSTATS**: 这是收集数据库对象统计...

    DB2数据库管理最佳实践笔记-10日常运维.docx

    Reorg主要用于减少表和索引的物理存储碎片,以提高查询性能。在收集新的统计信息后,可能需要执行Reorg以整理数据。例如: ```sql RUNSTATS ON TABLE &lt;表模式&gt;.&lt;表名&gt; REORG TABLE &lt;表模式&gt;.&lt;表名&gt; ``` 3. Reorgchk ...

    db2表空间不足及处理

    DB2表空间可以分为系统管理的表空间和用户管理的表空间两种。系统管理的表空间是由DB2数据库自动创建的,用于存储系统数据,而用户管理的表空间是由用户创建的,用于存储用户数据。 在DB2数据库中,表空间不足可能...

    DB2数据库管理最佳实践笔记-10日常运维 (2).docx

    2. Reorg:Reorg工具用于减少表和索引的物理存储碎片,从而提高性能。当表经过大量插入、删除和更新操作后,可能产生碎片,Reorg可以整理这些碎片,改善数据访问速度。例如,可以使用`REORG TABLE &lt;表模式&gt;.&lt;表名&gt;`...

    数据库优化(完整版)实用资料.doc

    runstats 是数据库管理系统(DBMS)用于收集数据库对象状态信息的工具,这些信息包括表和索引的统计信息,如行数、占用空间、最大值、最小值等。这些统计数据用于优化器,帮助其制定执行查询的最佳策略。当以下情况...

    深度分析:DB2性能调优

    在考虑是否使用扫描还是索引时,优化器会根据表和索引的存在情况、过滤因子以及查询的具体需求来决定。如果没有针对查询涉及的表和列的索引,或者优化器判断不使用索引执行查询更高效,那么可能会选择全表扫描。 ...

    MDC、数据库分区、视图.doc

    MDC 表的块索引结构上和普通索引是一样的,但块索引比普通索引要更小,因为块大小是一个页面中的平均记录数的数倍。块索引降低了磁盘使用率并明显加快了数据访问的速度。 MDC 表示一个物理组织,比如所有记录有相同...

    DB2数据库优化.doc

    2. **执行Reorg的时机**:在大量数据变更、索引添加或表结构更新后,应考虑执行Reorg操作。 **三、何时必须进行数据库优化** - 数据量变化超过10%。 - 添加或修改索引。 - 更新表结构。 **四、数据库优化步骤** ...

    DB2数据库管理最佳实践笔记-10日常运维.pdf

    Reorg工具用于减少表和索引的物理存储碎片,提高查询效率。执行Reorg后,DB2会重新组织数据,使其在磁盘上更有序,减少I/O操作。Reorg之前通常先运行Runstats,因为重组可能改变统计数据,之后还需要重新收集统计...

    DB2 日常维护指南,第 3 部分

    首先,DB2优化器依赖于表和索引的统计信息来选择查询的最优访问路径。统计信息如果过时或不准确,将导致优化器无法作出最佳决策,从而降低查询性能。DB2优化器为了提高执行查询的速度,需要定期收集和更新这些统计...

    深入理解DB2插入时间集群ITC表内部原理-contracted.doc

    这有助于在数据行插入时减少碎片,并且在删除或更新数据后,空闲的扩展块可以被有效地回收和重用,无需像常规表那样进行完整的REORG操作。 关于ITC表的一些常见误解包括认为它内部有一个隐藏列记录插入时间。实际上...

    DB2性能安全

    - **分区表损坏后的处理**:使用脚本提取工具(如`gj$ db2look_tbowner.ksh-t 表名`)获取表结构脚本,并重新执行该脚本来重建分区表。 #### 六、锁级别与索引 - **表级锁与行级锁**: - **表级锁**:在大多数情况...

    DB2之SQL优化浅析.pdf

    - 在创建表时明确指定表空间和索引表空间。 - 分区键的选择应当使得值域大且分布均匀,如电话号码等。 - 可以通过查询语句检查表数据的分布情况。 2. **合理的使用索引** - 索引字段应为WHERE子句中的关联字段...

    DB2数据库管理最佳实践笔记-10日常运维 (2).pdf

    它能整理表和索引,确保数据在磁盘上的连续性。在执行Reorg后,通常需要再次运行Runstats以更新统计信息。 3. **Reorgchk**:在执行Reorg之前,可以先使用Reorgchk检查哪些对象需要重组。这样可以避免不必要的操作...

    restfultiger-reorg:重组restfultiger的文件

    标题中的"restfultiger-reorg"可能是一个项目或库的名字,它与RESTful API设计有关,而"reorg"通常意味着对原有的结构或代码进行了重新组织。描述中提到的"悠闲的老虎"可能是一个隐喻,暗示这个项目在经过重组后变得...

Global site tag (gtag.js) - Google Analytics