`
chenyubo
  • 浏览: 79788 次
  • 性别: Icon_minigender_1
  • 来自: 重庆
社区版块
存档分类
最新评论

oracle streams

阅读更多
本文讲解streams的基础部件,同时深入探讨streams对redo的特殊要求。

streams是基于log miner的一种技术,可以用于数据同步,数据复制等功能。本系列主要涉及用streams升级数据库(9i -->10g)的知识。streams主要有3个功能部件: capture, propagation以及apply,同时还可以定义rule。rule可以绑定到capture,propagation以及apply, 用于筛选capture,propagation,apply的输入,从而可以根据需要只对满足rule的数据进行操作。

capture启动时会同时启动一个log miner的会话,log miner不停地从archive log/online redo log中抽取redo entry,capture 根据rule将这些redo entry变为LCR(Logic Change Record). Progagation 根据rule将满足条件的LCR传到目标数据库,然后apply 将满足rule的LCR 应用到目标数据库中。

redo的目的是数据库恢复,它包含了数据库的哪一物理数据块发生什么样的变化的信息。rowid可以准确地定位数据变化的具体位置,因此如果redo中包含rowid,就可以用于数据恢复了。但是rowid只对本数据库有效,如果使用streams,仅仅在redo中记载rowid不够的,因为原数据库和目标数据库的物理结构不一定是一样的。streams需要一种能唯一定位一个row变化的机制,那么什么可以用于唯一定位一个row呢?rowid, primary key都可以(unique index不行,因为对于unique index,可以允许多个row的相关列为null,因此在index的列为null时不能唯一定位一条记录)。其中只有primary key可以跨数据库,跨版本,跨平台。所以在使用streams是需要在redo中包含primary key的信息。

运行以下命令后,数据库就会在redo中添加相应的primary key。
alterdatabaseadd supplemental logdata(primary key) columns;
如果表中没有主键,redo中就包含所有的列(除了long等特殊字段外)。当一个变化(change)传递到目标数据库时,streams会查找相应的需要apply的行。比如表citizen的主键是ID, 当ID=43210的纪录在源数据库发生update变化后,streams会在目标数据库中利用ID=43210这个条件找到相应的行,然后就apply这个变化。假如数据表没有主键,并且有重复的行,那么streams在查找相应的行时,会发现有多行满足条件,这时streams就会报错。所以强烈建议所有的表中都要有主键,不然streams在运行时可能出现问题。

做个实验就可以发现执行
alterdatabaseadd supplemental logdata(primary key) columns;
后,redo的变化。

createtablet1 (a int primary key, b int, c int, d int, e int);
create table t2 (a int, b int, c int, d int, e int);

insert into t1 values (1,1,1,1,1);
insert into t2 values (1,1,1,1,1);

insert into t1 values (2,2,1,1,1);
insert into t2 values (2,2,1,1,1);
commit;

Test 1:
执行语句之前:
select supplemental_log_data_pk from v$database;
NO   

update t1 set c=10;
update t2 set c=10;
commit;

(以下使用log miner查找redo的信息,本文暂不提供log miner 的具体内容)
select sql_redo from v$Logmnr_contents where seg_name like 'T%' and sql_redo like 'update%
update "TEST"."T1" set "C" = '10' where "C" = '1' and ROWID = 'AAAHZjAABAAAMYyAAA';
update "TEST"."T1" set "C" = '10' where "C" = '1' and ROWID = 'AAAHZjAABAAAMYyAAB';
update "TEST"."T2" set "C" = '10' where "C" = '1' and ROWID = 'AAAHZlAABAAAMZCAAA';
update "TEST"."T2" set "C" = '10' where "C" = '1' and ROWID = 'AAAHZlAABAAAMZCAAB';

可以看到,redo中只包含rowid以及相关列变化后的值

Test 2:
执行语句之后:
alter database add supplemental log data (primary key) columns;

select supplemental_log_data_pk from v$database;
YES   

update t1 set c=-10;
update t2 set c=-10;
commit;

select sql_redo from v$Logmnr_contents where seg_name like 'T%' and sql_redo like 'update%
update "TEST"."T1" set "C" = '-10' where "A" = '1' and "C" = '10' and ROWID = 'AAAHZjAABAAAMYyAAA';
update "TEST"."T1" set "C" = '-10' where "A" = '2' and "C" = '10' and ROWID = 'AAAHZjAABAAAMYyAAB';
update "TEST"."T2" set "C" = '-10' where "A" = '1' and "B" = '1' and "C" = '10' and "D" = '1' and "E" = '1' and ROWID = 'AAAHZlAABAAAMZCAAA';
update "TEST"."T2" set "C" = '-10' where "A" = '2' and "B" = '2' and "C" = '10' and "D" = '1' and "E" = '1' and ROWID = 'AAAHZlAABAAAMZCAAB';


可以看到,redo中多了一些信息,对于主键是A的表T1, redo包含了主键的信息。 对于没有主键的表T2, redo中包含了所有列的信息
分享到:
评论

相关推荐

    Oracle Streams配置文档

    Oracle Streams是一种先进的数据复制解决方案,它允许用户在Oracle数据库之间实时传输数据,从而实现数据库的复制、归档、故障恢复和读写分离等多种功能。在本配置文档中,你将找到有关Oracle Streams的全面信息,...

    Oracle Streams Concepts and Administration

    ### Oracle Streams 概念与管理 #### 一、Oracle Streams 简介 Oracle Streams 是一个强大而灵活的数据复制和集成解决方案,它为 Oracle 数据库提供了实时的数据捕获、传输和应用功能。此技术主要用于数据库之间的...

    Oracle Streams Step by Step PPT

    Oracle Streams 是Oracle数据库提供的一种强大的数据流和事件流解决方案,它允许在单个数据库内或跨多个数据库之间高效地移动数据和事件。Streams的核心功能包括数据捕获、传播和服务应用,支持显式(通过编程方式)...

    Oracle Streams Concepts and Administration.pdf

    ### Oracle Streams概念与管理 #### 一、Oracle Streams概述 Oracle Streams 是一款强大的数据库复制解决方案,主要用于实现数据的异步复制、数据集成以及事务处理。它可以帮助用户在多个Oracle数据库之间进行高效...

    Oracle Streams 11g数据复制

    ### Oracle Streams 11g数据复制详解 #### 一、Oracle Streams概述 Oracle Streams 是一个高级的数据集成解决方案,它能够捕获并应用数据库中的变化,从而实现数据在多个Oracle数据库之间的复制与同步。这一功能...

    Oracle Data Guard与Oracle Streams技术对比.pdf

    Oracle Data Guard与Oracle Streams技术对比 Oracle Data Guard是一种Oracle数据库保护技术,用于建立一个或多个备用数据库,通过备用数据库与生产数据库的同步,以实现对数据库的保护。当发生错误、故障、灾难所...

    Oracle_Streams_11g_Data_Replication.pdf

    《Oracle Streams 11g 数据复制》一书深入探讨了Oracle Streams在11g版本中的应用与优化,为读者提供了全面的数据复制解决方案。本书由Kirtikumar Deshpande(Kirti)撰写,他拥有近30年的信息技术领域经验,专注于...

    Oracle Streams Advanced Queuing User's Guide 11g Release 2 (11.2

    Oracle Streams Advanced Queuing (AQ) 是Oracle数据库中的一个特性,用于在分布式系统中实现高效、可靠的消息传递。在11g Release 2 (11.2)版本中,Oracle Streams AQ 提供了一套完整的解决方案,支持异步处理、...

    基于Oracle Streams的数据库实时备份技术研究.pdf

    Oracle Streams 是 Oracle 数据库的一种高级数据复制技术,用于在数据库之间同步数据,实现数据的实时备份和灾难恢复。该技术的核心在于捕获数据库中的变化事件,如插入、更新和删除操作,并将这些变化以逻辑改变...

    Oracle Streams Replication Administrator's Guide

    ### Oracle Streams Replication管理员指南知识点概述 #### 一、Oracle Streams Replication简介 - **定义与功能**:Oracle Streams Replication是一种数据复制解决方案,用于在不同的Oracle数据库之间进行实时的...

    Oracle Streams Concepts and Administration 11g Release 2 (11.2)

    Oracle Streams是Oracle数据库的一个特性,它提供了一种在数据库实例之间高效、可靠地传输数据的方法。在11g Release 2 (11.2)版本中,Streams继续为分布式数据库环境提供强大的数据复制和整合解决方案。这个文档...

    Oracle STREAMS数据同步复制技术应用.pdf

    Oracle STREAMS 数据同步复制技术是一种高效的数据传输机制,主要用于实现Oracle数据库之间的实时或近实时的数据同步。该技术基于Oracle数据库的日志处理能力,通过解析数据库重做日志(Redo Log)来捕获数据变化,...

    Oracle Streams Replication Administrator’s Guide 11g Release 2 (

    Oracle Streams Replication是Oracle数据库的一种高级数据复制解决方案,它提供了高度灵活的数据同步和迁移机制,适用于多种场景,如灾难恢复、数据整合、负载均衡等。在11g Release 2 (11.2)版本中,这个技术进一步...

    Oracle streams双库同步的冲突处理方法.pdf

    Oracle Streams是一种Oracle数据库提供的免费、灵活的数据库同步机制,它基于Oracle高级队列技术,用于实现数据容灾和共享。然而,Streams在实际部署中可能会遇到稳定性问题,尤其是由冲突事务引发的问题。冲突通常...

    Oracle Streams双向复制功能的研究.pdf

    Oracle Streams双向复制功能的研究.pdf

    Streams_Oracle_Streams_twp

    ### Oracle Streams 技术白皮书关键知识点解析 #### 一、引言 Oracle Streams 是 Oracle 9i 数据库第二版引入的一项全新功能,旨在提供一体化的信息共享解决方案。这项技术的核心在于实现数据、事务处理及事件管理...

Global site tag (gtag.js) - Google Analytics