`
ijavagos
  • 浏览: 1248220 次
  • 性别: Icon_minigender_2
  • 来自: 北京
文章分类
社区版块
存档分类
最新评论

Oracle Redo 并行机制

 
阅读更多

Redo log 是用于恢复和一个高级特性的重要数据,一个redo条目包含了相应操作导致的数据库变化的所有信息,所有redo条目最终都要被写入redo文件中去。Redo log buffer是为了避免Redo文件IO导致性能瓶颈而在sga中分配出的一块内存。一个redo条目首先在用户内存(PGA)中产生,然后由oracle服务进程拷贝到log buffer中,当满足一定条件时,再由LGWR进程写入redo文件。

由于log buffer是一块共享内存,为了避免冲突,它是受到redo allocation latch保护的,每个服务进程需要先获取到该latch才能分配redo buffer。因此在高并发且数据修改频繁的oltp系统中,我们通常可以观察到redo allocation latch的等待。

Redo写入redo buffer的整个过程如下:

PGA中生产Redo Enrey -> 服务进程获取Redo Copy latch(存在多个---CPU_COUNT*2) -> 服务进程获取redo allocation latch(1) -> 分配log buffer -> 释放redo allocation latch -> Redo Entry写入Log Buffer -> 释放Redo Copy latch

. shared strand

为了减少redo allocation latch等待,在oracle 9.2中,引入了log buffer的并行机制。其基本原理就是,将log buffer划分为多个小的buffer,这些小的buffer被成为strand(为了和之后出现的private strand区别,它们被称之为shared strand)。每一个strand受到一个单独redo allocation latch的保护。多个shared strand的出现,使原来序列化的redo buffer分配变成了并行的过程,从而减少了redo allocation latch等待。

shared strand的初始数据量是由参数log_parallelism控制的;在10g中,该参数成为隐含参数,并新增参数_log_parallelism_max控制shared strand的最大数量;_log_parallelism_dynamic则控制是否允许shared strand数量在_log_parallelism_log_parallelism_max之间动态变化。

SQL>selectnam.ksppinm,val.KSPPSTVL,nam.ksppdesc

2fromsys.x$ksppinam,

3sys.x$ksppsvval

4wherenam.indx=val.indx

5--ANDnam.ksppinmLIKE'_%'

6ANDupper(nam.ksppinm)LIKE'%LOG_PARALLE%';

KSPPINMKSPPSTVLKSPPDESC

------------------------------------------------------------------------------

_log_parallelism1Numberoflogbufferstrands

_log_parallelism_max2Maximumnumberoflogbufferstrands

_log_parallelism_dynamicTRUEEnabledynamicstrands

每一个shared strand的大小 = log_buffer/(shared strand数量)

strand信息可以由表x$kcrfstrand查到(包含shared strand和后面介绍的private strand10g以后存在)。

SQL>selectindx,strand_size_kcrfafromx$kcrfstrandwherelast_buf_kcrfa!='00';

INDXSTRAND_SIZE_KCRFA

---------------------------

03514368

13514368

SQL>showparameterlog_buffer

NAMETYPEVALUE

-----------------------------------------------------------------------------

log_bufferinteger7028736

关于shared strand的数量设置,16cpu之内最大默认为2,当系统中存在redo allocation latch等待时,每增加16cpu可以考虑增加1strand,最大不应该超过8。并且_log_parallelism_max不允许大于cpu_count

注意:在11g中,参数_log_parallelism被取消,shared strand数量由_log_parallelism_max_log_parallelism_dynamiccpu_count控制。

. Private strand

为了进一步降低redo buffer冲突,在10g中引入了新的strand机制——Private strandPrivate strand不是从log buffer中划分的,而是在shared pool中分配的一块内存空间。

SQL>select*fromV$sgastatwherenamelike'%strand%';

POOLNAMEBYTES

------------------------------------------------

sharedpoolprivatestrands2684928

SQL>selectindx,strand_size_kcrfafromx$kcrfstrandwherelast_buf_kcrfa='00';

INDXSTRAND_SIZE_KCRFA

---------------------------

266560

366560

466560

566560

666560

766560

866560

...

Private strand的引入为OracleRedo/Undo机制带来很大的变化。每一个Private strand受到一个单独的redo allocation latch保护,每个Private strand作为私有的”strand只会服务于一个活动事务。获取到了Private strand的用户事务不是在PGA中而是在Private strand生成Redoflush private strand或者commit时,Private strand被批量写入log文件中。如果新事务申请不到Private strandredo allocation latch,则会继续遵循旧的redo buffer机制,申请写入shared strand中。事务是否使用Private strand,可以由x$ktcxb的字段ktcxbflg的新增的第13位鉴定:

SQL>selectdecode(bitand(ktcxbflg,4096),0,1,0)used_private_strand,count(*)

2fromx$ktcxb

3wherebitand(ksspaflg,1)!=0

4andbitand(ktcxbflg,2)!=0

5groupbybitand(ktcxbflg,4096);

USED_PRIVATE_STRANDCOUNT(*)

-----------------------------

110

01

对于使用Private strand的事务,无需先申请Redo Copy Latch,也无需申请Shared Strandredo allocation latch而是flushcommit是批量写入磁盘,因此减少了Redo Copy Latchredo allocation latch申请/释放次数、也减少了这些latch的等待,从而降低了CPU的负荷。

Private strand 事务过程如下:

事务开始 -> 申请Private strandredo allocation latch (申请失败则申请Shared Strandredo allocation latch) -> Private strand中生产Redo Enrey -> Flush/Commit -> 申请Redo Copy Latch -> 服务进程将Redo Entry批量写入Log File -> 释放Redo Copy Latch -> 释放Private strandredo allocation latch

注意:对于未能获取到Private strandredo allocation latch的事务,在事务结束前,即使已经有其它事务释放了Private strand,也不会再申请Private strand了。

每个Private strand的大小为65K10g中,shared pool中的Private strands的大小就是活跃会话数乘以65K,而11g中,在shared pool中需要为每个Private strand额外分配4k的管理空间,即:数量*69k

--10g:

SQL>select*fromV$sgastatwherenamelike'%strand%';

POOLNAMEBYTES

------------------------------------------------

sharedpoolprivatestrands1198080

SQL>selecttrunc(value*KSPPSTVL/100)*65*1024

2from(selectvaluefromv$parameterwherename='transactions')a,

3(selectval.KSPPSTVL

4fromsys.x$ksppinam,sys.x$ksppsvval

5wherenam.indx=val.indx

6ANDnam.ksppinm='_log_private_parallelism_mul')b;

TRUNC(VALUE*KSPPSTVL/100)*65*1024

-------------------------------------

1198080

--11g:

SQL>select*fromV$sgastatwherenamelike'%strand%';

POOLNAMEBYTES

------------------------------------------------

sharedpoolprivatestrands706560

SQL>selecttrunc(value*KSPPSTVL/100)*(65+4)*1024

2from(selectvaluefromv$parameterwherename='transactions')a,

3(selectval.KSPPSTVL

4fromsys.x$ksppinam,sys.x$ksppsvval

5wherenam.indx=val.indx

6ANDnam.ksppinm='_log_private_parallelism_mul')b;

TRUNC(VALUE*KSPPSTVL/100)*(65+4)*1024

-------------------------------------

706560

Private strand的数量受到2个方面的影响:logfile的大小和活跃事务数量。

参数_log_private_mul指定了使用多少logfile空间预分配给Private strand,默认为5。我们可以根据当前logfile的大小(要除去预分配给log buffer的空间)计算出这一约束条件下能够预分配多少个Private strand

SQL>selectbytesfromv$logwherestatus='CURRENT';

BYTES

----------

52428800

SQL>selecttrunc(((selectbytesfromv$logwherestatus='CURRENT')-(selectto_number(value)fromv$parameterwherename='log_buffer'))*

2(selectto_number(val.KSPPSTVL)

3fromsys.x$ksppinam,sys.x$ksppsvval

4wherenam.indx=val.indx

5ANDnam.ksppinm='_log_private_mul')/100/66560)

6as"calculatedprivatestrands"

7fromdual;

calculatedprivatestrands

--------------------------

5

SQL>selectcount(1)"actualprivatestrands"fromx$kcrfstrandwherelast_buf_kcrfa='00';

actualprivatestrands

----------------------

5

logfile切换后(和checkpoint一样,切换之前必须要将所有Private strand的内容flushlogfile因此我们在alert log中可能会发现日志切换信息之前会有这样的信息:"Private strand flush not complete",这是可以被忽略的),会重新根据切换后的logfile的大小计算对Private strand的限制:

SQL>altersystemswitchlogfile;

Systemaltered.

SQL >selectbytesfromv$logwherestatus='CURRENT';

BYTES

----------

104857600

SQL>selecttrunc(((selectbytesfromv$logwherestatus='CURRENT')-(selectto_number(value)fromv$parameterwherename='log_buffer'))*

2(selectto_number(val.KSPPSTVL)

3fromsys.x$ksppinam,sys.x$ksppsvval

4wherenam.indx=val.indx

5ANDnam.ksppinm='_log_private_mul')/100/66560)

6as"calculatedprivatestrands"

7fromdual;

calculatedprivatestrands

--------------------------

13

SQL >selectcount(1)"actualprivatestrands"fromx$kcrfstrandwherelast_buf_kcrfa='00';

actualprivatestrands

----------------------

13

参数_log_private_parallelism_mul用于推算活跃事务数量在最大事务数量中的百分比,默认为10Private strand的数量不能大于活跃事务的数量。

SQL >showparametertransactions

NAMETYPEVALUE

-----------------------------------------------------------------------------

transactionsinteger222

transactions_per_rollback_segmentinteger5

SQL >selecttrunc((selectto_number(value)fromv$parameterwherename='transactions')*

2(selectto_number(val.KSPPSTVL)

3fromsys.x$ksppinam,sys.x$ksppsvval

4wherenam.indx=val.indx

5ANDnam.ksppinm='_log_private_parallelism_mul')/100)

6as"calculatedprivatestrands"

7fromdual;

calculatedprivatestrands

--------------------------

22

SQL >selectcount(1)"actualprivatestrands"fromx$kcrfstrandwherelast_buf_kcrfa='00';

actualprivatestrands

----------------------

22

注:在预分配Private strand时,会选择上述2个条件限制下最小一个数量。但相应的shared pool的内存分配和redo allocation latch的数量是按照活跃事务数预分配的。

因此,如果logfile足够大,_log_private_parallelism_mul与实际活跃进程百分比基本相符的话,Private strand的引入基本可以消除redo allocation latch的争用问题。

转自Hello DBA

http://www.hellodba.com/Doc/Oracle_redo_strand_cn.html

------------------------------------------------------------------------------

Blog http://blog.csdn.net/tianlesoftware

网上资源: http://tianlesoftware.download.csdn.net

相关视频:http://blog.csdn.net/tianlesoftware/archive/2009/11/27/4886500.aspx

DBA1 群:62697716(); DBA2 群:62697977()

DBA3 群:62697850 DBA 超级群:63306533;

聊天 群:40132017

--加群需要在备注说明Oracle表空间和数据文件的关系,否则拒绝申请

分享到:
评论

相关推荐

    Oracle Redo并行机制

    Oracle Redo并行机制是Oracle数据库中用于优化日志写入性能的一种策略,尤其是在高并发和数据修改频繁的OLTP(在线事务处理)系统中。Redo日志是数据库恢复和事务持久化的关键组成部分,它记录了所有对数据库进行...

    用Oracle并行查询发挥多CPU的威力

    Oracle并行查询(OPQ)是Oracle数据库系统中一项强大的特性,它利用现代硬件的多处理器能力,显著提升大规模数据操作的效率。随着硬件的进步,尤其是对称多处理(SMP)服务器的普及,Oracle从Oracle8i版本开始在各个...

    ORACLE的工作机制.rar

    10. **并行执行**:Oracle支持并行查询和并行DML(数据操纵语言),通过将任务分解为子任务分配给多个进程或线程,以加速处理。 总结来说,Oracle的工作机制是复杂的,涉及到数据库设计、存储、查询优化、并发控制...

    用Oracle并行查询发挥多CPU的威力定义.pdf

    Oracle并行查询(OPQ)是Oracle数据库系统中一种强大的特性,旨在利用多CPU系统的能力,提高查询性能和响应时间。随着硬件的发展,服务器经常配备8个、16个甚至32个CPU,Oracle数据库也相应地实现了并行性功能。自...

    试谈ORACLE的工作机制.docx

    ### Oracle工作机制详解 #### 一、Oracle实例与体系结构 Oracle数据库的工作机制主要围绕着“实例”和“数据库”这两个核心概念展开。其中,“实例”指的是数据库运行时在内存中的状态,包括系统全局区(SGA)和一...

    oracle机制及内存区的优化建议

    Oracle数据库的优化是一个复杂而关键的任务,涉及到多个层面,包括其内部机制、内存区的配置以及数据文件和进程管理。本文将深入探讨Oracle的核心组件,给出优化建议。 首先,Oracle数据库由内存、文件和进程三大...

    系统资源参数对ORACLE8i数据库并行执行性能影响的研究.pdf

    适当调整SGA大小,如数据缓冲区高速缓存、redo log buffer、共享池和大池等,可以优化内存使用,提高并行执行效率。 此外,论文还可能涉及了并行执行服务器(PX服务器)的数量、并行度设置(PARALLEL_DEGREE)、...

    参数性能设置优化【ORACLE DB 】.zip

    Oracle数据库是全球广泛使用的大型关系型数据库管理系统,其性能优化是一项关键任务,直接影响到系统的响应速度、并发处理能力和...通过深入理解Oracle的内部机制,我们可以更好地进行参数设置,提升数据库的运行效率。

    《Oracle数据库性能优化实践指南》PDF

    在存储和I/O优化方面,本书会探讨数据块设计、表和索引的分区策略、redo log和undo segment管理,以及如何配置Oracle的缓存机制(如Buffer Cache和Redo Log Buffer)以减少磁盘I/O。此外,还会涉及数据库的内存结构...

    Oracle性能优化技术内幕

    其次,书中将详细讨论Oracle的缓存机制,如Buffer Cache、Redo Log Buffer、Shared Pool等,理解这些缓存的工作原理和管理策略,可以有效减少I/O操作,提升系统响应速度。同时,讲解如何通过调整SGA(System Global ...

    oracle海量数据中提升创建索引的速度.docx

    redo 日志是 Oracle 数据库中用于记录所有变化的日志,包括数据的插入、更新和删除等操作。在创建索引时,redo 日志会记录所有的操作,这将减慢创建索引的速度。使用 nologging 参数可以禁止 redo 日志的生成,从而...

    Oracle专家高级编程-Expert_one-on-one

    7. **并行执行**:Oracle的并行执行特性可以显著提高大数据量操作的性能,书中会讲解并行查询、并行DML和并行DDL的使用,以及并行服务器的管理。 8. **高可用性方案**:Oracle提供了多种高可用性解决方案,如RAC...

    Oracle与sql简单优化与锁机制浅析.ppt

    本文将深入探讨Oracle数据库的基础概念、SQL优化以及锁机制。 首先,Oracle数据库的对象存储结构是理解其工作原理的关键。在Oracle中,数据以Segment的形式存储,Segment是数据库对象(如表、索引)在磁盘上的物理...

    oracle数据库文本文档

    Oracle还提供了过程化数据库选项和并行服务器选项,前者增强了数据库的程序化能力,后者则通过并行处理技术提高了大规模数据处理的能力。 #### 三、Oracle数据库体系结构 Oracle数据库体系结构主要由实例...

    Oracle Concepts Oracle概念(10g R2)(中英文对照文档)

    6. **事务和并发控制**:讨论了事务的概念,提交、回滚和保存点的操作,以及Oracle的多版本并发控制(MVCC)机制。 7. **备份与恢复**:详述了Oracle的备份策略,包括冷备份、热备份和逻辑备份,以及RMAN(恢复管理...

    ORACLE9i_优化设计与系统调整

    §9.9.3 Oracle并行服务器 110 §9.10 Oracle数据库增长的规划 111 §9.10.1 不同增长表的配置 111 §9.10.2 对增长表进行规划和分析 112 第10章 数据库结构设计要点 113 §10.1 分析阶段的对表的理解 113 §10.2 ...

    oracle 详细概述,oracle11g

    它可以自动完成数据文件、控制文件、redo log文件等的创建、扩展和删除,降低了DBA的工作负担。 4. **数据泵(Data Pump)**: 数据泵是Oracle 11g中用于数据迁移和备份恢复的快速工具,比以前的EXP/IMP更快更高效...

    Oracle与sql简单优化与锁机制浅析.pptx

    本篇主要探讨Oracle数据库的简单优化策略以及锁机制的基础知识。 1. **对象存储** - **Segment**: Oracle中的数据对象,如表和索引,以Segment的形式存储。Segment是由Extent组成,是数据库在逻辑上组织数据的方式...

    ORACLE_UNIX易错问题集锦

    【Oracle Unix 易错问题集锦】 在Oracle数据库在Unix环境下运行时,常常会遇到一些常见但容易引发问题的情况。本文旨在通过作者的实际工作经验,总结并分享这些易错点,帮助读者避免重蹈覆辙,提升对Oracle和Unix的...

Global site tag (gtag.js) - Google Analytics